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Beschreibung 



Die Erfindung betrif ft ein interaktives Datensicht- und 
Bediensystem, das sich durch ein HochstmaS an Tragekomf ort , 
Leistungsf ahigkeit und Flexibilitat auszeichnet. 

Aus den deutschen Of f enlegungsschrif ten DE 196 31 414 Al 
und DE 197 28 8 90, deren Of f enbarungsgehalt hiermit 
ausdrucklich in die vorliegende Beschreibung einbezogen 
wird sind nach art einer Brille zu tragende optische 
Vorrichtungen bekannt, die eine Aufnahme des 

Netzhautref lexbildes und eine Uberlagerung von 
Zusatzbildern im Auge ermoglichen. In zwei deutschen 
Patentanmeldungen, deren Einreichungstag und Anmelder mit 
dem dieser Anmeldung ubereinstimmen, werden sowohl 
Weitergestaltungen dieser optischen Vorrichtungen als auch 
Systeme beschreiben, die diese Vorrichtungen erganzen oder 
gar ersetzen. Insbesondere werden darin die Justierung der 
obengenannten optischen Vorrichtung sowie ein System 
beschrieben, das auf neue Art und Weise auch in der Lage 
ist, Bilder auf ein Auge zu Projizieren. Letzteres System 
basiert auf einer Projektion eines Bildes auf die Netzhaut 
des Auges, die gleichzeitig, jedoch nacheilend zu einer 
scanartigen Erfassung des Netzhautref lexbildes erfolgt. 

Da die in den obengenannten Anmeldungen beschriebenen 
Vorrichtungen und Systeme bevorzugt in Form einer Brille 
ausgestaltet sind, werden sie nachfolgend der Einfachheit 
halber auch als Brillensystem bezeichnet. Diese Bezeichnung 
impliziert keine Einschrankung . Selbstverstandlich sind 
auch andere Ausf uhrungsf ormen solcher Vorrichtungen und 
Systeme in den unten beschriebenen Zusammenhangen anstelle 
des "Brillensystems " gleichfalls anwendbar. 

In der DE 196 31 414 Al werden 
Anwendungsmogl i chke i ten des darin 



zahlreichen 
of f enbarten 
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Brillensystems angesprochen, ohne daS diese genauer 
beschrieben werden konnten. Der. Miterfinder des bekannten 
Brillensystems hat jetzt in Zusammenarbeit mit einem 
For schungs team die Anwendungsmoglichkeiten der oben 
erwahnten Brillensysteme genauer untersucht, wobei aus 
Uberlegungen der wirtschaf tlichen Implement ierbarkeit 
Weiterbildungen und Abanderungen der bisher offenbarten 
Brillensysteme entstanden sind, die im Rahmen dreier 
alterer Patentananmeldungen mit den Aktenzeichen 
PCT/EP00/09840, PCT/EP00/09841 und PCT/EP00/09843 am 
6.11.2000 angemeldet wurden. Auch der Inhalt dieser 
Anmeldungen wird ausdrucklich durch Bezugnahme in diese 
Anmeldung einbezogen. 

Aufgabe der vorliegenden Erfindung ist es, das 
Anwendungsgebiet der optischen Vorrichtung nach den 
deutschen Of f enlegungsschrif ten DE 196 31 414 Al und DE 197 
2 8 8 90 .und der irizwischen auf der " Basis dieser 
Vorrichtungen weiter entwickelten Inf ormationssysteme 
sinnvoll zu erweitern und zum Bestandteil eines neuen 
Systems zu machen, bei dem die Vorteile der die Retina 
scannenden und entsprechende bildverandernde oder 
verbessernde optische Information auf die Retina 
einspielenden optischen Vorrichtung optimal genutzt werden. 

Diese Aufgabe wird durch ein es auf durch ein interaktives 
Datensicht- und Bediensystem gemaS Patentanspruch 1 gelost, 
das sich durch ein HochstmaS an Tragekomf ort , 
Leistungsfahigkeit und Flexibilitat auszeichnet. 

Erf indungsgemaS wird die in der Art einer Brille von einer 
Bedienperson tragbare optische Vorrichtung, mit der bis 
Frequenzen von 100 Hz die Netzhaut scanbar und ein auf das 
Auge einfallendes Bild, insbesondere ein Netzhautref lexbild 
aufnehmbar ist, zum Bestandteil eines interaktiven 
Datensicht- und Bediensys terns , mit dem besonderen Vorteil, 
dass zur Bedienung des Systems ein geringstmoglicher 
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Aufwand seitens der Bedienperson erforderlich wird. Die 
abzurufende Information kann mit kurzester Zeitverzogerung 
entweder in Form von Bildsignalen und/oder in Form von 
Signalen zur Ansteuerung weiterer 

Inf ormationswiedergabegerate , die beispielsweise auf 
akustischer oder sonstiger sensorischer Basis betrieben 
werden, zur Bedienperson weitergeleitet werden. Damit 
ergibt sich ein System, das sich durch ein HochstmaS an 
Unmittelbarkeit des interaktiven Inf ormationsaustauschs 
auszeichnet. 

Dabei kann die Datenubertragungseinrichtung in jeder 
gangigen Ausgestaltung vorliegen. Eine besonders 
vorteilhafte Weiterbildung ergibt sich mit den Merkmalen 
des Anspruchs 2, wonach zwischen Datensicht- und 
Bediensystem und externer Inf romationsquelle eine mobiles 
Kommunikationssystem geschaltet ist. Hierdurch wird das 
Einsatzgebiet des Systems zusatzlich erweitert. In diesem 
Fall kann die Datenubertragurigseinrichtung ein Mobiltelefon 
oder' einen Computer, wie z.B. LapTop oder PalmTop mit einer 
geeigneten DFU-Schnittstelle aufweisen. 

Die den Inf ormationsf luss steuernden zusatzlichen 
Steuerbefehle der Bedienperson konnen in verschiedenster 
Form vorliegen. Vorteilhafte Ausgestaltungen des Systems, 
wie sie Gegenstand des Anspruchs 5 sind, sehen vor, dass 
diese Steuerbefehle auf- optischen Inf romationssignalen 
basieren, die von der optischen Vorrichtung abgegeben 
werden. In diesem Fall wird beispielsweise der Bedienperson 
eine Menuleiste in das Sichtfeld eingespielt, indem uber 
die optische Vorrichtung - wiederum mit einer Bildfrequenz 
von etwa bis zu 100 Hz Bildsignale auf die Netzhaut 
abgegeben werden. Die Auswahl eines Menupunkts erfolgt 
entweder uber eine Bedienmaus oder aber allein uber die 
Fokussierung . dieses ausgewahlten Menupunktes und unter 
Zuhilfenahme eines Wahlsignals, das wiederum eine Taste 
oder aber ein Lidschlagsignal sein kann. Die Fokussierung 
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karm mit einfachen Mitteln festgestellt werden, da sich in 
diesem Fall der auszuwahlende Meniipunkt im Zentrum der 
Fovea Centralis befindet, was beim laufenden Scan der 
Netzhaut bzw. des auf das Auge einfallenden Bildes parallel 
festgestellt wird. 



10 



Die zusatzlichen Steuerbef ehle der Bedienperson konnen - 
wie das Gegenstand des Anspruchs 6 ist - auch auf 
akustischen Inf romat ions signal en basieren, die yon einer 
Spracheingabeeinheit abgegeben werden. In diesem Fall ist 
das System mit einem geeigneten Mikrofon und gegebenfalls 
mit einer Sprachanalysevorrichtung auszustatten. 



Da erf indungsgemaS eine optische Vorrichtung Verwendung 
15 findet, die zyklisch die Netzhaut der Bedienperson 
abtastet, karm das System auf sehr wirtschaf tliche Art und 
Weise dazu herangezogen werden, eine aktive Bedienperson- 
Kennung . vorzunehmen. -Dadurch ergibt sich die Moglichkeit , 
einerseits das System bzw. Operationen des "Systems 
2 0 automat isch vor Benutzung- durch Unberechtigte zu schiitzen, 
und andererseits eine automatische personalisierte 
Einstellung des Systems auf die das System tragende 
Bedienperson vorzunehmen. Zu diesem Zweck ist es lediglich 
erf orderlich, die von der optischen Vorrichtung erfasste 
25 Struktur der Netzhaut in Form eines Datensatzes in der 
Signalverarbeitungseinrichtung zwischen zu speichern und 
mit einem bereits hinterlegten personenbezogenen Datensatz 
zu vergleichen. 



3 0 Aufgrund der Kompaktheit und der kurzen Signalwege von der 
optischen Vorrichtung zum Auge einerseits und zur 
Kommunikationseinrichtung andererseits karm das System sehr 
vielseitig eingesetzt werden. Besonders vorteilhafte 
Anwendungen sind Gegenstand des Anspruchs 8, d.h. die 

3 5 Verwendung im medizinischen Bereich, insbesondere im 
Bereich der Ophthalmologic , als Therapie- oder 
Analysegerat . 
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Im ubrigen ist das System mit jeder optischen Vorrichtung 
und in Verbindung mit jedem Inf ormationssystem betreibbar, 
das in den alteren Anmeldungen DE 196-31 414 Al, DE 197 28 
890 und PCT/EPOO/09840, PCT/EP00/09841 und PCT/EP00/09843 
beschrieben ist. Diese Kombinationen sind Gegenstand der 
weiteren Unteranspriiche . 

Zu den diese Weiterbildungen kennzeichnenden 

Systemmerkmalen, die in vielen der beschriebenen 

Ausfuhrungsformen wiederkehren, gehoren, da£ das System : ein 

Hornhautref lexbild des Auge mindest teilweise erfaSt; 

ein Teil des auf das Auge einfallenden Lichtes mittels 

einer spharischen oder spharisch wirkenden 

Ref lektionsschicht in eine Sensorvorrichtung lenkt; 

das Netzhautbild uber den Oxidierungsgrad der 

Netzhautzapfen und/oder der Netzhautstabchen ermittelt; 

lediglich eine partielle Erfassung eines 

Netzhautref lexbildes vornimmt; Und/oder 

eine Gesichtsf elderf as sungs vorrichtung umfaSt, die 
sichtbares Licht aus dem naturlich wahrgenommenen 
Gesichtsf eld erfagt, ohne ein Netzhautref lexbild zu 
erfassen. 

Dabei kann das erf indungsgemaSe System Teil eines 
Informations systems werden, das 

a) Informationen in Abhangigkeit von einem naturlich 
wahrgenommenen Gesichtsfeld eines Menschen zur Verfugung 
stellt; 

b) Informationen in Abhangigkeit von aus einem Auge 
erfaSten Signale zur Verfugung stellt, diese jedoch nicht 
in das Auge projiziert, aus dem die Signale erfaSt worden 
sind; oder 

c) Informationen in Abhangigkeit von aus einem Auge 
erfafiten Signale zur Verfugung stellt, wobei die 
Informationen zumindest teilweise in das Auge projiziert, 
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die Signale jedoch nicht in der aus der DE 196 31 414 Al 
bekannten Weise erfaSt werden. 

Es sei zu erwahnen, daS viele Anwendungen dieser 
Brillensysteme auf einer Kombination mehrerer der 
obengenannten Grundkonzepte basieren, wodurch eine 
naturliche Verflechtung der zugehorigen drei Anmeldungen 
entsteht . 

Die Einbettung des erf indungsgemaSen Systems in diese 
Inf ormationssysteme ermoglicht es, der Bedienperson 
zusatzlich Inf ormationen zur Verftigung zu stellen, die uber 
unser personliches Wissen und Sinnesempf indungen 
hinausgehen. Beispiele hierfiir sind das Suchen einer 
Unterputz-Elektroleitung in einer Wand, die Navigation in 
einer fremden Stadt, das Sammeln von Wildpilzen und das 
Untersuchen eines moglicherweise gef ahrlichen Objekts 
mittels eines ferngesteuerten Roboters . 

Die starke Abhangigkeit von sehenden Menschen aii ihre 
Sehempf indungen tragt deutlich dazu bei, daS zusatzliche 
Inf ormationen nur schwer zur Verfugung gestellt werden 
konnen. Denn die Tatsache, daS sehende Menschen vorwiegend 
mit den Augen wahrnehmen, macht es in vielen Fallen 
erf orderlich, da£ die Zusatzinf ormationen entweder uber die 
Augen zugespeist oder anhand der gesehenen Inf ormationen 
ermittelt werden. Bei einer Zuspeisung uber die Augen muE 
jedoch die Ausrichtung der Augen genaustens berucksichtigt 
werden, urn ein richtiges "Plazieren" und ein "Verwackeln" 
oder "Verwischen" der zugespeisten Inf ormationen zu 
vermeiden. Zudem sollen die Inf ormationen in vielen Fallen 
ohne gezielte Bewegung der Augenapfel zuganglich gemacht 
werden; ein Autofahrer mag zwar eine Landkarte auf seinem 
SchoS haben, mochte aber ungern von der StraSe wegschauen 
miissen. 
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Durch ihre Bindung an feste Medien, z.B. Papier, CRT- und 
LCD-Bildschirme, u.s.w., sind bisherige visuelle 
Inf ormat ions sy st erne nicht in der Lage gewesen, die 
Komf ortbedurfnisse eines sehenden Menschen ausreichend 
nachzukommen. Nicht visuellen Inf ormationssystemen fehlte 
bisher die fur sehende Menschen selbstverstandliche 
Kopplung an das Gesehene. 

Mit der Eingliederung des interaktiven Datensicht- und 
Bediensystems in ein Inf ormationssystem nach den 
Unteranspriichen wird ein System zur Verfugung gestellt, 
dessen Inf ormat ionsdarbeitung den natiirlichen Bedurfnissen 
eines sehenden Menschen auf bisher unerreichte Art und 
Weise nachkommt . Dabei ist das Inf ormationssystem 
gengeniiber dem Stand der Technik hinsichtlich 
Implementierbarkeit und Wirtschaf tlichkeit verbessert. 

In seiner allgemeinsten Form umfaSt das Inf ormationssystem 
eine Signalerf assungsvorrichtung," die. von einem . eine 
Netzhaut aufweisenden Auge zuruckref lektierte Signale 
erfaSt, eine Inf ormationsvorrichtung und eine 

Ausgabevorrichtung, die in Zusammenarbeit mit der 
Inf ormationsvorrichtung Informationen in Korrelation mit 
den erfaSten Signalen zur Verfugung stellt. Beyorzugt 
werden die Informationen in Abhangigkeit von den erfaSten 
Signalen und/oder in Abhangigkeit von aus dem natiirlich 
wahrgenommenen Gesichtsfeld erfaStem, sichtbarem Licht zur 
Verfugung gestellt. 

Als Signalerf assungsvorrichtung dient vorzugsweise eines 
der oben besprochenen Brillensysteme, bei dem eine 
scannende Abtastvorrichtung ein Netzhautref lexbild der 
Netzhaut mindestens teilweise erf aSt . Eine Abwandlung 
dieser, Abtastvorrichtung, die an der Hornhaut des Auges 
ref lektiertes Licht anstelle des Netzhautref lexbildes 
erfaSt, ist insbesondere bei Infrarotanwendungen 
vorteilhaft, da die Hornhaut Licht mit einer Wellenlange 
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von ca. 1,1 nm stark reflektiert. Auch uber die Erfassung 
der chemischen Veranderung der Stabchen und/oder Zapfchen 
ist es grundsatzlich moglich, entsprechend verwertbare 
Aussagen uber das auf die Netzhaut einfallende Bild zu 
machen . 



10 



15 



20 



25 



Es wurde auch f estgestellt , daS eine der Erfassung aus dem 
Auge zuruckref lektierter Signale komplementare Erfassung 
des Gesichtsfelds besondere Vorteile mit sich bringt. 
Zwecks einer solchen komplementaren Erfassung umfaSt die 
Gesichtsf elderf assungsvorrichtung und/oder die 

Informationsvorrichtung des erf indungsgemaSen Systems 
bevorzugt eine im wesentlichen konfokal zum Auge 
angeordnete, sparisch oder sparisch wirkende 

Ref lektionsschicht, die ein Teil des auf das Auge 
gerichteten Lichtes in eine Sensorvorrichtung zur Erfassung 
ablenkt. Aufgrund des im Vergleich zum Netzhaut- oder 
Hornhautref lex urn ein Vielf aches hoheren Ref lektionsgrads 
der Ref lektionsschicht wird bei gleich empf indlichen 
Photosensoren ein wesentlicher Lichtgewinn erzielt. Auch 
lieSen sich entsprechend kostengunstige Photosensoren in 
der Sensorvorrichtung verwenden. Es kann also Vorteile mit 
sich bringen, wenn das auf das Auge fallende Licht nicht 
nur, nur teilweise oder gar nicht uber das Netzhaut ref lex 
erfaSt wird. 



30 



35 



Je nach Zielanwendung miissen nicht samtliche raumliche 
Bereiche des Gesichtsfelds erfaSt werden. Beispielsweise 
bei einer Anwendung, bei der Zusatzinf ormationen bezuglich 
eines mit dem Auge angepeilten Objektes durch das 
erf indungsgemaSe Inf ormationssystem zur Verfugung gestellt 
werden, konnte es ausreichen, das auf die Netzhautgrube 
(Fovea) fallende Licht zu erfassen und einer 
Mustererkennung oder sonstiger Analyse zu unterziehen. Denn 
ein mit dem Auge angepeiltes Objekt wird typischerweise auf 
die Netzhautgrube, die den Bereich des scharfsten Sehens 
darstellt, abgebildet. Somit ware die Erfassung des auf 
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diesen Teil der Netzhaut fallenden Lichtes moglicherweise 
ausreichend, urn geniigend viele charakterisierende 
Obj.ektmerkmale ermitteln zu konnen. 

Sinnvoll ist auch, wenn nur ein beschrankter 
Spektralbereich des auf das Auge fallenden Lichtes erfaEt 
wird. Wird, zum Beispiel das auf ein Auge fallende 
Infrarotlicht erfafit, so kann auch bei Nacht die 
Orientierung des Auge bestimmt und/oder wertvolle 
Informationen aus dem Gesichtsfeld gewonnen werden. 

Dementsprechend konnen jegliche Einschrankungen bezuglich 
der Erfassung des auf ein Auge fallenden Lichtes sinnvoll 
sein. Insbesondere werden Einschrankungen des erfafiten 
Spektralbereiches , des erf aGten Gesichtsf eldbereiches und 
der erfaSten Sehzeitabschnitte ggf . angewandt . 

Zwecks der redundanten oder stereoskopischen Bilderf assung 
kann die dafiir bestimmte Vorrichtung des erf indungsgemaSen 
Inf ormationssys terns derart ausgelegt sein, das auf mehrere 
Augen fallende Licht zu erfassen, Je nach Anwendungsgebiet 
miissen die Augen nicht zwanglaufig einem einzelnen Person 
gehoren. Zum Beispiel ware es moglich, die von den Augen 
mehrerer Feuerwehrmanner wahrgenommenen Bilder zuzuglich 
Positions- und aus einer Inf rarotspektralanalyse der Bilder 
ermittelten Brandstarkeninformationen auf Monitore in einer 
Einsatzzentrale einzuspielen. 

In der Ophthamologie wird zwischen den Begriffen 
"Gesichtsfeld" und "Blickf eld" unterschieden. Ein 
Gesichtsfeld ist der Teil eines Raumes, der mit unbewegtem 
Auge erfafit werden kann. Ein Blickfeld ist das Gebiet,. das 
mit den Augen erfaSt werden kann. Somit ist hier, wie im 
iibrigen, das Gesichtsfeld als Verursacher des auf ein Auge 
naturlich fallenden Lichtes zu verstehen. 

Die Gesichtsf elderf assung 
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Einbindung 



ist 



einer 



das 



Informationssystem in der Lage, sichtbares Licht aus dem 
dem Auge zugeordneten Gesichtsfeld in eine Qualitat, d.h. 
mit einer Empf indlichkeit , einer Auflosung, einer Scharfe, 
u.s.w., zu erfassen, die die natiirliche Wahrnehmung des 
Auges bei weitem tibersteigt. Zudem ist es durch die 
erf indungsgemaSe Korrelation des 

Inf ormationzurverftigungstel lens mit den von der 
Signalerfassungsvorrichtung erfaSten Signalen moglich, 
entsprechende Teile des erfaSten Lichts bei einer im Laufe 
des Inf ormationzurverfiigungstellens auftretende Bearbeitung 
so zu behandeln, als waren sie aus dem Auge erfaSte 
Reflexbilder, d.h. als waren sie das tatsachlich Gesehene. 
Eine derartige Ausfuhrung des erf indungsgemaSen 
Inf ormationssystems kombiniert somit die Vorteile eines 
Informationssystem, das . hochwertige 

Gesichtsf eldinf ormationen direkt aus dem Gesichtsfeld 
gewinnt, mit den Vorteilen eines Inf ormationssystems , das 
tatsachlich gesehene Gesichtsf eldinf ormationen aus dem Auge 
gewinnt . 

Die Korrelation des Inf ormationzurverfugxingstel lens mit den 
aus dem Auge zuruckref lektierten, erfaSten Signalen kann 
beispielsweise dadurch erfolgen, daS mehrere Bildpunkte 
eines Augenref lexbildes , z.B. eines Hornhaut- oder 
Netzhautref lexbildes, erfaSt werden, die liber eine 
Auswertevorrichtung mit entsprechenden Bildpunkten aus dem 
erfaSten Gesichtsfeld in Verbindung gebracht werden. Auch 
eine uber die erfaSten Signale f estgestellte Blickrichtung 
des Auges kann dazu dienen, eine Korrelation zwischen aus 
dem erfaSten Gesichtsfeld gewonneiien 

Gesichtsf eldinf ormationen und dem tatsachlich Gesehenen zu 
schaffen. Wie unten beschrieben wird, kann die Korrelation 
jedoch auch darin bestehen, gewonnene 
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Gesichtsfeldinformationen in eine mit dem Gesehenen 
korrelierte Art und Weise auf die Retina zu projizieren. 

Selbstverstandlich muE die Gesichtf elderf assungsvorrichtung 
nicht auf eine Erfassung des Gesichtsf eldes beschrankt 
sein, sondern kann auch eine teilweise oder komplette 
Erfassung des Blickfeldes umfassen, die eine mindestens 
partielle Erfassung des Gesichtsf eldes beinhaltet. 

Die hohe Qualitat des aus dem Blick- bzw. Gesichtsf eld 
erfaSten Bildes kann auch als Grundlage fur eine 
iibersensorische Inf ormationsdarbietung dienen. Zum Beispiel 
konnten Gesichtsfeldinformationen aus dem erfaSten 
Blickf eldlicht derart gewonnenen und auf die Netzhaut 
projiziert werden, daS das vom Auge wahrgenommene Bild 
mindestens teilweise scharfer, naher, weitwinkliger oder 
auf sonstige Arc und Weise libersinnlich wirken. 

Die Erfindung sieht eine Irif ormationsquelle vor, die eine 
Dateiibank, eine Sensorik, eine Inf ormationsnetzanbindung 
und/oder eine Auswertevorrichtung umfassen kann. 

Eine besonders interessante Aus fuhrungs form der Erfindung 
umfaSt eine Sensorik als Inf ormationsquelle . Denn hiermit 
kann eine ubersinnliche Wahrnehmung in Verbindung mit dem 
Gesehenen gebracht werden. Bei dem erwahnten Beispiel des 
Suchens einer Elektroleitung konnte die erf indungsgemaSe 
Inf ormationsquelle Magnetf eldsensoren, die in der Lage 
sind, metallische Leitung beziiglich eines bekannten 
Koordinatensys terns, beispielsweise das erfafite Blickf eld, 
zu lokalisieren. Somit ware es zum Beispiel mittels 
geeigneter Bildverarbeitungsssof tware moglich, den Verlauf 
vorhanderer Elektroleitungen mittels einer wie in den oben 
erwahnten Patentanmeldungen beschriebenen Projektion eines 
Zusatzbildes auf das vom Auge gesehene Bild zu iiberlagern. 
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Samtliche Arten von bekannten Sensoren eignen sich zur 
Anwendung als Inf ormationsquelle, insbesondere dann, wenn 
der Sensor anhand des erfaSten Lichtbildes aktiviert bzw. 
abgefragt wird. Zum Beispiel ware es bei der Priifung einer 
integrierten elektronischen Schaltung moglich, da£ nach 
gezielten Anblick einer Leitung auf einem Schaltplan der 
Schaltung und einem Tastensdruck die Position dieser 
Leitung auf einem fertigen Chip berechnet wird, so da6 die 
Strom- und Spannungswerte der Leitung mittels einer 
beriihrungslosen MeSgerat erfaSt und dem Anwender iiber das 
Brillensystem dargestellt werden. 

Ein Beispiel fur ein eine Datenbank und eine 
Informationsnetzanbindung umfassendes Inf ormat ions sys t em 
ware ein betriebsinternes Postvertei lungs sys tern, bei dem 
Akten mit Barcodeauf klebern versehen sind, die die 
jeweilige Akte eindeutig kennzeichnen. Soli eine Akte 
betriebsintern verschickt werden, gibt der \ Absender 
beispielsweise die Durchwahl des Empf angers Und einen die 
Akte bezeichnenen Code mittels einer Software ein, die 
diese Daten in einer Datenbank auf einer der vielen 
bekannten Weisen entsprechend abspeichert. Bei einer 
spateren Sortierung der Akte wird der kennzeichnende 
Barcode iiber das einem Postverteilungsangestellten 
getragene Brillensystem beispielsweise bei gezieltem Blick 
und Tastenklick erfaSt und durch eine Erkennungsvorrichtung 
Oder -software erkannt . Per Funkverbindung mit einem 
betriebsinternen Datennetz werden die der Akte 
zugeordneten, postverteilungsrelevanten Daten aus der 
Datenbank geholt und iiber eine geeignete 

Ausgabevorrichtungen nach evtl. Aufbereitung an den 
Postverteilungsangestellten, beispielsweise als Ansage iiber 
Kopfhorer "Hr. Schmidt, Finanzwesen, Gebaude G, 3. Stock, 
Zimmer 310" , mitgeteilt. 

Unter Auswertevorrichtung sind samtliche Arten von 
Auswertevorrichtungen zu verstehen, insbesondere 
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Bildverarbeitungsvorrichtungen. Solche 
Auswertevorrichtungen sind auch in den obigen Beispielen 
zur Sprache gekommen. 

5 Erf indungsgemafi konnen die Inf ormationen taktil, visuell, 
horbar, riechbar und/oder geschmacklich zur Verfugung 
gestellt werden. Es gehort zur Aufgabe der Erfindung, eine 
Inf ormationsdarbietung zu ermoglichen, die den Bediirfnissen 
eines sehenden Menschens auf bisher unerreichte Art und 

10 Weise nachzukommen . Hierzu kanri gehoren, daS die 
Inf ormationen dem Menschen in geeigneter Weise, das heifit 
unter Ausnutzung eines oder mehrerer der funf Sirme, zur 
Verfugung gestellt werden konnen. Die Inf ormationen konnen 
jedoch auf beliebige Art und Weise zur Verfugung gestellt 

15 werden und bediirfen keinen bestimmten Adressant. 
Beispielsweise konnen die Inf ormationen einem weiteren 
System zur Veftigung gestellt werden oder durch eine 
optische oder akustische Ausgabevorrichtung in die Umgebung 
ausgestrahlt werden. - Sclion durch 'die erf indungsgemaSe 

20 Abhangigkeit zwischen dem Zurverfugungstellen von 
Informationen und dem auf das Auge fallenden Lichtbild wird 
erreicht, daS der vom sehenden Menschen erwartete 
Zusammenhang zwischen Gesehenem und zur Verfugung 
gestellten Informationen besteht. 

2 5 

Diese Abhangigkeit wird von der erf indungsgemaSen 
Vorrichtung bei der Ermittlung der Informationen, bei dem 
Zurverfugungstellen der Information oder wahrend beider 
dieser inharenten Vorgangen beriicksichtigt . Beispiele fur 

3 0 eine Beriicksichtigung dieser Abhangigkeit bei der 

Ermittlung der Informationen sind oben angegeben. Beim 
Zurverfugungstellen der Informationen kann diese 
Abhangigkeit zum Beispiel dadurch berucksichtigt werden, 
daS die Informationen mittels einer -Riickprojektion in das 
3 5 Auge auf eine Art und Weise in das gesehene Bild 
eingeblendet werden, daS ein zeitlicher, farblicher, 
raumlicher, kontrastbezogener , oder sons tiger sinnvoller 
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Zusammenhang zwischen den Inf ormationen und dem gesehenen 
Bild hergestellt wird. Insbesondere kann die Abhangigkeit 
darin bestehen, daS das erfafite Lichtbild dazu verwendet 
wird, die Lage und Orient ierung des Augapfels 
f estzustellen, so daS ein zwecks eines Zurverfiigungstellens 
der Inf ormationen auf das Auge projiziertes Bild bei einer 
Bewegung des Auges festzustehen scheint, sich bei einer 
Bewegung des Auges mitzubewegen scheint oder sich auch bei 
einer Bewegung des Auges entsprechend einem vorgegebenen 
Verlauf zu bewegen scheint. Insbesondere laSt sich die 
Auswirkung der Sakkadenbewegungen des Auges auf diese 
Vorgange berucksichtigen bzw. kompensieren. 

Selbstverstandlich miissen die Inf ormationen nicht unbedingt 
einem Menschen . sondern konnen auch einem anderen System zur 
Verfiigung gestellt werden. 

Tracking 

Es ist also" mit erf indungsgemaSe Inf ormationssystem 
moglich, die Lage und Ausrichtung mindestens eines Auges 
schnell, genau und mit geringem Auf wand zu ermitteln, z.B. 
mit einer Bestimmungsrate von 100 Hz, einer 
Positionsgenauigkeit yon wenigen Mikrometern und einer 
Vorrichtung in tragbarer Bauweise. Unter Anwendung des 
erf indungsgemaSen Inf ormationssystems bei der dynamischen 
Bestimmung der Orientierung des Auges kann die Verarbeitung 
derart rasch erfolgen, daS die Genauigkeit durch die 
Sakkadenbewegungen des Auges nicht verfalscht wird. Dies 
wird dadurch erreicht, daS das Inf ormat ionsys tern eine das 
Auge nicht beruhrende Signalerf as sungs vorrichtung aufweist, 
die vom Auge zuruckref lektierte Signale erf afit . 
Ref lektierbare Signale, zum Beispiel Schall- oder 
elektromagnetische Signale, erlauben eine hochf requente 
Erfassung, so daE die Verarbeitungsgeschwindigkeit 
hauptsachlich von einer vom Inf ormationssystem umfaSten 
Auswertevorrichtung bestimmt wird. Auf dem Gebiet der 
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signalverarbeitenden Hardware sind jedoch erhebliche 
Fortschritte in den letzten Jahren beziiglich der 
Arbeitsgeschwindigkeit , des Stromverbrauchs und der 
SystemgroSe erzielt worden. Die Erf orschungen der Erfinder 
haben ergeben, dafi ein Informations system durch eine 
derartige Gestaltung die erstrebte 

Verarbeitungsgeschwindigkeit erreichen kann. 

Typischerweise dient ein Teil des Inf ormationssystems 
selbst als Ref erenzkoordinatensystem. Allerdings ist auch 
moglich, daS das Inf ormationssystem lediglich ein 
Bezugskoordinatensystem in einem anderen 

Ref erenzkoordinatensystem darstellt, und dafi das Verhaltnis 
zwischen dem Bezugskoordinatensystem und dem 

Ref erenzkoordinatensystem beispielsweise durch die 
Auswertevorrichtung oder einen anderen Mechanismus 
ermittelt wird. 

Bevorzugt erfaSt die Signalerf assungsvorrichtung vom Auge 
zuriickref lektiertes Licht. Licht bildet ein vorzugliches 
Medium zur Ubertragung der vom Auge zuriickref lektierte 
Signale, da die Einsatzf ahigkeit des Auge ein Vorhandensein 
von Licht voraussetzt. Allerdings ergibt sich eine 
Uberlagerung der vom Licht aus dem Gesichtsfeld 
ubertragenen Gesichtsf eldsignalinf ormationen mit der 
Augenref lexsignalinf ormation, die durch die Reflektion am 
Auge entsteht. Diese unterschiedlichen Inf ormationen lassen 
sich jedoch unter Anwendung bekannter 

Signalverarbeitungsmethoden unterscheiden und sinnvoll zur 
Bestimmung der Orientierung des Auge verwenden. Dies ist 
insbesondere dann der Fall, wenn das 

Signalubertragungsmedium aus einer zum Inf ormationssystem 
gehorenden Signalquelle stammt, das das Medium vor seiner 
Reflektion am Auge mit einem vorgegebenen Signal 
beauf schlagt . 
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Ahnlich kann die Erfassung von Signalen aus anderen 
Signaliibertragungsmedien als Licht auch vorteilhaft sein. 
Zum Beispiel sind Bauteile zur Erzeugung und Erfassung von 
Schallwellen in verschiedenen kostengunstigen und kompakten 
Aufiihrungen am Markt erhaltlich. Solche Bauteile lassen 
sich auch als integrierte Elemente einer integrierten 
Schaltung verwirklichen. Ahnliche Uberlegungen gelten den 
nicht sichtbaren Frequenzbereichen von e 1 ek t r omagne t i s chen 
Wellen. 

Obwohl nicht vollstandig erforscht, ist es denkbar, daS ein 
Informationssystem mit einer Mehrzahl an 

Signalerf as sungsvorrichtungen, die Signale aus 

unterschiedlichen Medien oder Spektralbereichen erfassen, 
verbesserte Systemeigenschaf ten aufweisen konnte . Diese 
Erkenntnis liegt den Uberlegungen zugrunde, . da£ die 
Auswertevorrichtung im Falle einer Unterbelastung auch 
andere Systemauf gaben ubernehmen konnte, und daS die von 
der Auswertevorrichtung _ vorgenommene Signalbearbeitung 
stark vom Ihf ormationsgehalt des zu bearbeitenden Signals 
abhangt. So brachte es Vorteile, das Informationssystem auf 
einer Signalerf assung zu basieren, die zur Bewertung nur 
wenig Arbeitsleitung von der Auswertevorrichtung 
beansprucht , jedoch allein evtl . nicht die Basis fur eine 
ausreichende Genauigkeit liefert, und diese 

bearbeitungsarme Signalerf assung derart durch die 
Ergebnisse einer genauen und bearbei tungs int ens i ven , jedoch 
nur intermittierend durchzuf uhrenden Signalerf assung zu 
erganzen bzw. kalibrieren, daS die notwendige Genauigkeit 
zu jeder Zeit erreicht wird. 

Sinnvoll hat sich eine Netzhautref lexerf assung erwiesen, 
bei dem das Netzhautref lex naturlichen oder kunstlichen 
Lichts als aus dem Auge zuruckref lektiertes Signal 
intermittierend oder partiell erfaSt wird. Eine 
vollstandige Erfassung des Netzhautref lexes ist sowohl 
zeit- als auch arbeitsintensiv . Andererseits ist eine 
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Erfassung des Netzhautref lexes insofern sinnvoll, als sie 
eine direkte Ermittlung des wahrgenommen Gesichtsf elds in 
Relation zur Netzhaut erlaubt . Denn, wie oben erwahnt, eine 
Aufbereitung des erfaEten Netzhautref lexes laSt sowohl 
5 Netzhautmerkmale, wie z.B. die Fovea centralis oder der 
blinde Fleck, als auch das Reflexbild des auf das Auge 
fallenden Lichts erkennen. Auch das in der Aderhaut 
vorhandene Blutgef aSnetz wird bei entsprechender 
Aufbereitung des Netzhautref lexbildes sichtbar, was eine 
10 sehr gute Grundlage zur Bestimmung der Orientierung des 
£ Augapfels liefert. Wird das Netzhautref lex deshalb 

^P^V intermittierend oder partiell erfa&t, so laSt sich der 

Bearbeitungsauf wand reduzieren, wahrend auf eine genaue 
Ermittlung der Relation des wahrgenommenen Gesichtsf elds 
15 zur Netzhaut nicht verzichtet wird. Selbstverstandlich 
lassen sich Netzhautmerkmale ohne eine 

Netzhautref lexer fassung verf olgen. Beispielsweise lassen 
sich die Blutgef afie der Aderhaut uber ihren im 
Inf rarotbereich sichtbaren Warmeausstrahlung erkennen. 
20 " 

Die Erfindung wird nachstehend anhand der Beschreibung von 
Ausfuhrungsbeispielen unter Bezugnahme auf die Zeichnung 
naher beschrieben. Es werden viele Merkmale der Erfindung 
im engen Zusammenhang des jeweiligen, konkret dargestellten 
25 Ausfuhrungsbeispiels erlautert. Selbstverstandlich laSt 
sich jedes einzelnen Merkmal der Erfindung mit jedem 
anderen Merkmal kombinieren, soweit die resultierende 
Kombination nicht zu einem fur den Fachmann als sofort 
unsirmig erkennbaren Ergebnis f iihrt . Diese Aussage betrifft 
3 0 nicht die Bestimmung des gewerblichen Schutzbereichs dieser 
Patentanmeldung/Patent sofern einen Schutzbereich nach 
anwendbarem Recht durch die Anspriiche verliehen wird. 



35 



Es zeigen: 

Figur 1 ein interaktives Datensicht- und Bediensystem gemaS 
einem ersten Ausf uhrungsbeispiel der Erfindung; 
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Figur 2 eine detaillierte Ansicht eines Auges im 
Querschnitt ; 

5 Figur 3 eine Ausf iihrungsf orm eines bei der Erfindung zum 
Einsatz kommenden interaktiven Brillensystems , bei der eine 
Signalerfassungsvorrichtung in Form einer scannenden 
Augenabtastvorrichtung vorgesehen ist; 

10 Figur 4 eine Ausf uhrungs form einer beim erf indungsgemaSen 
System verwendbaren interaktiven Brille, bei der eine 
Ausgabevorrichtung in Form einer scannenden 

Projektionsvorrichtung vorgesehen ist; 

15 Figur 5A eine interaktive Brille gemaS einem vierten 
Ausf iihrungsbeispiel ; 

Figur 5B- eine Detailzeichung einer in -der " Figur 5 
dargestellten kombinierten Signalerf assungs- und 

2 0 Projektionsvorrichtung; 

Figur 6A eine interaktive Brille gemaS einem funften 
Ausf uhrungsbei spiel ; 

25 Figur 6B eine Detailzeichung einer in der Figur 6A 
dargestellten kombinierten Signalerf assungs- und 

Projektionsvorrichtung; 

Figur 7A eine interaktive Brille gemaS einem sechsten 

3 0 Ausf iihrungsbeispiel ; 

Figur 7B eine Detailzeichung einer in der Figur 7A 
dargestellten kombinierten Signalerf assungs- und 

Projektionsvorrichtung; 

35 

Figur 8 eine interaktive Brille gemaS einem siebten 
Ausf iihrungsbeispiel ; 
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Figur 9 eine interaktive Brille gemaS einem achten 
Ausf uhrungsbeispiel; 

Figur 10A eine Draufsicht einer Brille gemaE einem neunten 
Ausf uhrungsbeispiel ; 

Figur 10B eine Frontansicht einer Brille gemaE einem 
neunten Ausf uhrungsbeispiel ; 

Figur 11A das naturlich wahrgenommene Gesichtsfeld eines 
Benutzers eines gemafi einem zehnten Ausf uhrungsbeispiel 
gestalteten Inf ormationssystems ; 

Figur 11B das naturlich wahrgenommene Gesichtsfeld eines 
Benutzers eines gemaS einem zehnten Ausf uhrungsbeispiel 
gestalteten Inf ormationssystems ; 

Figur . lie eine - schemenhaf te Darstellung eines 
Abtastmusters ; 

Figur 11D eine schemenhafte Darstellung eines abgeanderten 
Abtastmuster ; 

Figur 12A das naturlich wahrgenommene Gesichtsfeld eines 
Benutzers eines gemaS einem elften Ausf uhrungsbeispiel 
gestalteten Inf ormationssystems ; 

Figur 12B das naturlich wahrgenommene Gesichtsfeld eines 
Benutzers eines gemaS einem elften Ausf uhrungsbeispiel 
gestalteten Inf ormationssystems ; 

Figur 12C das naturlich wahrgenommene Gesichtsfeld eines 
Benutzers eines gemaS einem elften Ausf uhrungsbeispiel 
gestalteten Inf ormationssystems ; 
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Figur 12D das naturlich wahrgenommene Gesichtsfeld eines 
Benutzers eines gemaS einem elften Ausf uhrungsbei spiel 
gestalteten Inf ormationssystems ; 

5 Figur 12E das naturlich wahrgenommene Gesichtsfeld eines 

Benutzers eines gemaS einem elften Ausf uhrungsbeispiel 
gestalteten Inf ormationssystems ; 

Figur 13A das naturlich wahrgenommene Gesichtsfeld eines 

10 Benutzers eines gemaS einem zwofften Ausf uhrungsbeispiel 
gestalteten Inf ormationssystems ; 

Figur 13B das naturlich wahrgenommene Gesichtsfeld eines 

Benutzers eines gemaS einem zwoften Ausf uhrungsbeispiel 
15 gestalteten Inf ormationssystems ; 

Figur 14A ein erf indungsgemaSes Inf ormationssys tern gemaS 
einem dreizehnten Ausf uhrungsbeispiel ; 

2 0 Figur 14B ein erf indungsgemaSes Inf ormationssystem gemaS 

einem dreizehnten Ausf uhrungsbeispiel ; 

Die Figur 15 ein erf indungsgemafies Inf ormationssystem gemaS 
/ einem vierzehnten Ausf uhrungsbeispiel ; 

25 

Die Figur 16 eine schematische Darstellung eines 
erf indungsgemaSen Inf ormationssystems gemaS einem 

funfzehnten Ausf uhrungsbeispiel ; und 

3 0 Figure 17 ein optisches System gemaS einem sechzehnten 

Ausf uhrungsbeispiel . 

In der Beschreibung der Figuren werden ahnliche oder 
identische Gegenstande mit ahnlich oder gleich endenden 
35 Bezugsziffern bezeichnet. Viele der abgebildeten 
Gegenstande weisen symmetrische oder komplementare 
Komponenten auf , die durch einen Zusatzbuchstaben, 
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beispielsweise "L" fur links und "R" fur rechts,- nach dem 
Bezugsziffer unterschieden werden. Betrifft die Aussage 
jede einzelne Komponente einer solchen symmetrischen oder 
komplementaren Gruppierung, wird auf den Zusatzbuchstaben 
5 in manchen Fallen der Ubersichtlichkeit halber verzichtet. 

Figur 1 

Figur 1 zeigt ein im weitesten Sinn als Inf orma t ions sys t em 
10 fungierendes interaktives Datensicht- und Bediensystem 100 
gemafi einem ersten Ausf iihrungsbei spiel der Erfindung. Das 
System 10 0 ist in Form eines interaktiven Brillensystems 
12 0 bzw. einer interaktiven Brille 12 0 ausgefiihrt, die 
zwei optische Vorrichtungen 150 umf afit . Bevorzugt befinden 
15 sich die optischen Vorrichtungen 150 jeweilig auf einer 
Innenseite eines linken 121L oder rechten 121R Biigelteils 
der Brille 120. Je nach Anwendungsbereich sind auch andere, 
die " Sicht nicht sto.rende Anordnungeh .der optischen 
Vorrichtungen, z.B. im Bereich eines. uber die Nasenwurzel 
20 eines Beneutzers verlauf enden Nasenstegs 122 der Brille 
12 0, sirmvoll. 

Die optische Vorrichtung 150 der Brille 120 ist uber 
Verbindungsleitungen 101 an eine 

2 5 Signal verarbeitungseinrichtung in Form einer 

Prozessoreinheit 14 0 angeschlossen. Sind Photodetektoren 
und/ oder Lichtquellen von den optischen Vorrichtungen 
umfaSt, dienen die Verbindungsleitungen zur Ubertragung von 
elektrischen Detektor- • bzw. Steuersignalen. Die 

3 0 Photodetektoren bzw. Lichtquellen konnen jedoch in der 

Prozessoreinheit 140 angeordnet und uber lichtleitende 
Verbindungsleitungen 101 an die optischen Vorrichtungen 150 • 
der Brille 120 angeschlossen werden. Dies tragt zur 
Gewichtsreduktion der Brille 120 bei . 

35 

Mit dem Bezugszeichen 196 ist eine strichpunktiert 
angedeutete Kommunikationsschnitts telle bezeichnet, an die 
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entsprechende Ausgangssignale der 

Signalverarbeitungseinrichtung 140 gegeben werden, urn uber 
ein vorzugsweise mobiles Kommunika t i ons sy s t em 197, die uber 
eine Signal leitung 196a an die Schnittstelle 196 
5 angeschlossen ist, mit einer externen Inf ormationsquelle 
198 in kommunizierende Verbindung zu treten. 

Als mobiles Kommunikat ions system 197 kann 
beispielsweise ein tragbares Telefon, ein LapTop oder ein 

10 PlamTop dienen, wobei die Verbindung fur die 
Datenf emiibertragung auf der Basis aller gangigen 
Protokolle wie GSM, UMTS, CDMA, TDMA oder DECT erfolgen 
kann. Bei der externen Inf ormationsquelle 198 handelt es 
sich im allgemeinsten Fall urn eine Datenbank bzw. urn 

15 Dateien, auf die durch geeignete Protokolle, wie z.B. uber 
das Internet zugegriffen werden kann. 

Die Signalleitung 196a ist bidirektional , so dass uber 
sie im . interaktiven Datenaustausch zwischen 

20 Kommunikat ions system 197 und Datenbank 198 entsprechende 
Anforderungssignale auf die Schnittstelle 196 und von dort 
auf die Signalverarbeitungseinrichtung 14 0 zuriickgegeben 
werden. Eine nicht naher gezeigte und vorzugsweise in der 
Prozessoreinheit 14 0 integrierte Steuervorichtung sorgt 

2 5 dafur, dass die Anforderungssignale in die gewunschten 
Operationssignale umgewandelt werden, mit denen entweder 
die optische Vorrichtung 150 zur Einspielung zusatzlicher 
Bildinf ormation auf die Netzhaut und/oder zumindest ein 
weiteres Inf ormationswiedergabegerat , wie z.B. ein 

30 Kopf horersystem 150a zur Ubertragung von zusatzlicher 
Information zur Bedienperson veranlasst wird. Wenn ein 
weiteres Inf ormationswiedergabegerat 150a vorgesehen ist, 
ist vorzugsweise eine weitere Signalleitung 101a vorhanden, 
die zur Prozessoreinheit 140 gefuhrt ist. 

35 

Mit strichpunktierter Linie ist ein Mikrofon 150a 
angedeutet, das Bestandteil des Datensicht- und 
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Bediensystems ist und liber das eine Spracheingabe erfolgen 
kann. Eine entsprechende Signalleitung 101b ist vom 
Brillensystem zur Prozessoreinheit gefuhrt. Uber das 
Mikrofon kann eine sprachgesteuerte Bedienung des 
interaktiven Datensicht- und Bediensystems vorgenommen 
werden. Es konnen beispielsweise Steuervorgange wie 
Blattern in Anzeigemenus durchgefuhrt oder bestimmte 
Aktionen des Systems, wie z.B. das Auslosen von Anwahl- 
oder Abwahlvorgangen ausgelost werden. 



Auf diese Weise ist das System in der Lage, laufend und 
gleichzeitig Daten der optischen Vorrichtung und der 
Kommunikationseinrichtung zu verarbeiten und ggf. in 
Abhangigkeit zusat zlicher Steuerbef ehle der Bedienperson, 
die entweder uber die Leitung 101 oder die Leitung 101b auf 
die Prozessoreinheit gegeben werden, die 

Signalverarbeitungseinrichtung 140 uber die 

Kommunikationsschnlttstelle () und/oder das weitere 
Inf romationswiedergabegerat" 150a so anzusteuern, ' dass das 
gewunschte Ergebnis der interaktiven Kommunikation 
erzielbar ist. So ist es Beispielsweise moglich, blick- 
oder sprachgesteuert akustische oder Bildinf ormat ionen, die 
vom Internet uber die Kommunikationseinrichtung 
heruntergeladen wurden, -zu der Bedienperson zu leiten. Im 
Fall von optischen Inf ormat ionen werden diese dem auf das 
Auge einfallenden Bild posit ionsgenau uberlagert. 

Eine weitere MoglichkeTt der Ansteuerung der 
Datenubertragungs- und Signalverarbeitungseinrichtung 
realisiert durch die Komponenten 140, 196, 197 - besteht 
beispielsweise darin, dass uber das optische System 150 ein 
Steuermenu auf die Netzhaut der Bedienperson eingespielt 
wird. Da das Bild auf der Netzhaut zyklisch, vorzugsweise 
mit einer Abtast f requenz von 100 Hz abgestastet wird, kann 
das optische System 150 in Verbindung mit der 
Prozessoreinheit 140 zu jedem Zeitpunkt feststellen, 
welches Bild sich im Zentrum des Blickfeldes befindet. Denn 
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dieses Bild kommt in der Fovea Centralis zu liegen. Wenn 
somit die Bedienperson einen bestimmten Menupunkt oder eine 
eingespieltes Prigramm-Steuersymbol fokussiert und wenn zu 
diesem Zeitpunkt ein bestimmtes Auslosesignal erzeugt wird, 
5 wird die entsprechende Operation aufgerufen. Das 
Auslosesignal kann durch ein geeignete am System 
vorgesehene Taste, uber das Spracheingabesys tern (Mikrofon 
150b in Verbindung mit Sprachdekoder in der 
Prozessoreinheit ) oder aber auf optischem Weg erzeugt 
10 • werden, indem z.B. der in dem Moment bewusst durchgef uhrte 
Lidschlag als Ausloser herangezogen wird. 

Selbstverstandlich sind Modif ikationen des Systems denkbar, 
ohne den Grundgedanken der Erfindung zu verlassen. So kann 

15 selbstverstandlich - wie durch die strichpunktierte Linie Z 
angedeutet - die mobile Datenubertragungseinrichtung 197 
zusammen mit der Schnitt stelle 196 und der 
. Signalverarbeitungseinri.chtung " 14.0. zu einer Einheit 
zusammengef asst sein. - . 

20 - 

Die Datenubertragungseinrichtung kann einen vorzugsweise 
tragbaren Computer, wie z.B. einen LapTop oder PalmTop 
aufweisen, der mit einer geeigneten DFU-Schnittstelle 
ausgestattet ist. 

25 

Als Steuereinheit zur Aktivierung bestimmter Operationen 
des Systems kann auch eine elektromechanische 
Steuereinheit, wie z.B. einer Bedienmaus () vorgesehen 
sein . 

30 

Da die optische Vorrichtung die Netzhaut der Bedienperson 
standig abtastet, kann sie - insbesondere wenn ein 
geeignetes Wellenlangenband, . beispielsweise das 

Inf rarotband, des Scanstrahls gewahlt wird - die Struktur 
35 der Netzhaut erfassen, so dass auf die Bedienperson 
bezogene eineindeutig zuordenbare Benutzer- bzw. Trager- 
Kennungsdaten als Datensatz in der 
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Signalverarbeitungseinrichtung 14 0 zwischengespeichert 
werden konnen. Der Datensatz kann dann zur Trager kennung 
bzw. zur personalisierten Einstellung des Systems an die 
betreffende Bedienperson herangezogen werden. 

5 

Das System eignet sich in besonders vorteilhaf ter Weise zur 
Verwendung im medizinischen Bereich, insbesondere im 
Bereich der Ophthalmologic , als Therapie- oder 
Analysegerat , aber auch im militarischen Anwendungsbereich, 
10 wenn es darum geht, im mobilen Einsatz auf grolJe 
Datenmengen zuzugreifen und entsprechende aus der Datenbank 
heruntergeladene Daten moglichst zeitgleich fur die 
Bedienperson zu nutzen. 

15 Im folgenden werden verschiedene Ausf uhrungsbeispiele der 
optischen Vorrichtung beschrieben, die in vorteilhaf ter 
Weise in Verbindung mit dem erf indungsgemaSen Datensicht- 
und Bediensystem Anweiidung findet. Ferner werden 
Inf ormationssysteme beschrieben, die verschiedenene 

20 ebenfalls einsetzbare - Modif ikationen der optischen 
Vorrichtung beinhalten und mit dem Datensicht- und 
Bediensystem sinnvoll kombinierbar sind. Zum besseren 
Verstandnis des Arbeitsweise der optischen Vorrichtung und 
des damit kombinierten Systems soli jedoch zunachst auf die 

25 Figur 2 eingegangen und anhand dieser Darstellung der 
Aufbau des menschlichen Auges verdeutlicht werden 

Figur 2 

30 Figur 2 zeigt zwecks Verstandnis der Erfindung eine 
detaillierte Ansicht eines Auges 280 im Querschnitt. Das 
Auge 280, das in einer aus Schadelknochen gebildeten 
Augenhohle 20 (lat. . Orbita) im Kopf eines Menschen 
untergebracht und hier im Sinne eines Augapfels 280 . zu 

3 5 verstehen ist, besteht aus einer von einer 
lichtdurchlassigen Hornhaut 283 (lat. Kornea) und einer 
sichtlich weiSen Lederhaut 28 (lat. Sklera) umgebenen 



Seite - 25 - 



[File:ANM\P0451 2B1 .doc] Beschreibung, 29.01 .01 
2nd Sight m it Retina Scan 
PHYSOPTICS Opto-Electronic GmbH 



m 



Kammer. Die Lederhaut 28 ist auf seiner dem Inneren des 
Auges 280 zugewandten Seite von einer Aderhaut 287 (lat. 
Choroidea) iiberzogen, die auf seiner ebenfalls inneren 
Seite eine lichtempf indliche Netzhaut 281 (lat. Retina) 
tragt und diese mit Blut versorgt . Durch ihre Pigmentierung 
verhindert die Aderhaut 287 eine Steuung des 
darauf f allenden Lichts, die das Sehvermogen storen konnte. 



10 



15 



20 



25 



30 



Das Gewebe der Netzhaut 281 umfaSt zwei Arten von 
Photorezeptorzellen, namlich Stabchen und Zapfen (beide 
nicht dargestellt) , die dem Menschen den Sehsinn 
ermoglichen. Diese Photorezeptorzellen absorbieren das 
durch eine Augenlinse 282 gebundelte Licht in einem 
Wellenlangenbereich von ca. 380-760 nm und verwandeln es 
durch eine Reihe von chemischen Reaktionen in elektrische 
Nervensignale. Die Signale der verschiedenen Nervenzellen 
der Netzhaut 281 werden dann uber einen Sehnerv 25 an das 
Gehirn weitergeleitet und dort zu einem wahrnehmbaren Bild 
verarbeit-et . Die zahlreichen, ca. 120 Millionen zahlenden 
und stark lichtempf indlichen Stabchen sind auf die 
Signalaufnahme im Dammerlicht (sogenanntes skotopisches 
Sehen) spezialisiert und liefern ein Graustuf enbild. Die 
ca * 6 >5 Millionen, vergleichsweise weniger 

lichtempf indlichen Zapfen dagegen sind fur das Farbsehen 
bei Tageslicht (sogenanntes photopisches Sehen) zustandig. 
Bei der Lichtabsorbtion findet eine Oxidierung von 
Pigmenten in den Photorezeptorenzellen statt. Zur 
Regenerierung der Pigmente bedarf es bei den Zapfen ca. 6 
Minuten und bei den Stabchen ca. 3 0 Minuten. Eine 
Betrachtungsdauer von ca. 200 msec ist notwendig, bis der 
Sehreiz uber die Photorezeptoren einsetzt und eine 
Inf ormationsaufnahme uber die Netzhaut 281 erfolgt. 



Die Netzhaut 281 weist eine Vertiefung 286 auf, die durch 
35 ihre im Vergleich zur ubrigen Netzhaut hoher Dichte an 
Zapfen als etwas starker pigmentiert erscheint . Diese 
Vertiefung 286, die ublicherweise Sehgrube 286 (Fovea 
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centralis) genannt wird, liegt in einem als "gelber Fleck" 
(lat. Makula) bekannten Bereich der Netzhaut und stellt den 
Bereich des scharfsten Sehens dar. Die Fovea centralis 286 
ist nur mit Zapfen besetzt, weist eine sehr hohe 
Zapfendichte auf und beansprucht lediglich ca. 0,01% der 
Netzhautoberf lache . An der mit dem Bezugszeichen 288 
gekennzeichneten Stelle vis-a-vis der Linse 282 tritt das 
Sehnerv 2 5 durch eine siebartige Offnung in der Lederhaut 
28 in das Innere des Auges ein. Diese Stelle 288 weist 
keine Photorezeptorzellen auf, weshalb sie als "blinder 
Fleck" bezeichnet wird. 

Die von der Hornhaut 2 83 und der Lederhaut 2 8 gebildeten 
Kammer ist durch eine verformbare Linse 282 und einen 
muskelosen Strahlenkorper 23 (auch Ziliarkorper genannt) , 
der die Linse 282 tragt, unterteilt. Der zwischen der Linse 
282 und der Netzhaut 281 liegende Teil der Kammer, der ca. . 
2/3 des Augapfels _ ausmacht, bildet einen sogenannten 
Glaskorper 21, ein gallertiges Gebilde, das zu uber 98% aus 
Wasser besteht und die Netzhaut 281 stiitzt und schutzt. Der 
als Vorderkammer 22 bezeichnete, zwischen der Hornhaut 283 
und der Linse 282 liegende Teil der Kammer enthalt ' eine 
Flussigkeit, die die Hornhaut 283 ernahrt . .'In ihrer Urform 
bricht die Linse 2 82 das auf das Auge fallende Licht 
typischerweise derart, daS das feme Gesichtsfeld auf die 
Netzhaut 281 scharf abgebildet wird. Durch 

Anspannung/Entspannung der Muskeln des Ziliarkorper 23 kann 
die Form und somit auch die Brechungscharakteristik der 
Linse 282 uber einen breiten Bereich verandert werden, um 
beispielsweise eine scharfe Abbildung nahliegender 
Gegenstande des Gesichf sf elds auf die Netzhaut 2 81 zu 
ermoglichen. Dieser Vorgang lauft in den meisten Fallen fur 
den betroffenen Menschen unbewuSt ab. 

Unmittelbar vor der Linse 282 befindet sich in der 
Vorderkammer 2 2 eine aus gefarbtem Gewebe bestehende Blende 
285 veranderbaren Durchmessers , die den Lichteinfall auf 
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die lichtempf indlichen Teile des Auges 280 reguliert und 
dem Auge 280 seine charakteristische Farbung verleiht . 
Diese Blende 285 wird deshalb als Regenbogenhaut 285 (lat. 
Iris) bezeichnet. Aufgrund der geringen Lichtruckstrahlung 
der Linse 282, des Glaskorpers 21 und der Netzhaut 281 
erscheint der zentrale Bereich der Iris 285 schwarz und 
wird Pupille 284 bezeichnet. Auch die Regulierung der 
PupillengroEe lauft fur den Menschen unbewuSt ab. 

Das Auge 280 ist iiber sechs teils parallel, teils schrag 
zueinander verlaufende Muskeln 24 an die Schadel verbunden, 
die ein Schwenken des Auges 2 80 und folglich eine Anderung 
der Blickrichtung ermoglichen. Das binokular, ohne Bewegung 
der Augen 280 erfaSte Gesichtsfeld umfaSt horizontal ca. 
170° und vertikal ca. 110°. Werden die Augen 280 bewegt, 
kann ein binokulares Blickfeld von horizontal ca. 2 90° und 
vertikal ca. 190° erfaSt werden. Der von der Fovea 
centralis 286_erfafiten Bereich des scharften Sehens umfaSt 
lediglich ca. i* . Eine f iktive Achse durch die Mitte dieses 
Bereichs wird als Sehachse bezeichnet und entspricht der 
Blickrichtung. Auch eine Rotation des Auges urn die Sehachse 
wird durch die Muskeln 24 ermoglicht. 

Die sechs Muskeln 24 sind fur samtliche Augenbewegungen 
zustandig. Bei einer Betrachtung eines Fixpunkts finden 
sogenannte Mikrotremors des Auges 28 0 statt, bei denen das 
Augen 280 leicht zittert, urn eine vorubergehende 
Erschopfung der chemischen Reaktionf ahigkeit der 
betroffenen Photorezeptorzellen beim gleichbleibenden Reiz 
zu vermeiden. Wahrend eines Blickrichtungswechsels oder 
einer Kopf bewegung finden sogenannte Sakkadenbewegungen 
statt, mit deren Hilfe die Fovea centralis 286 auf ihr 
neues Fixationsziel gerichtet bzw. auf ihr bisheriges 
Fixationsziel gehalten wird. Bei dieser sehr komplex 
ablauf enden Bewegung wird das Auge 280 unwillentlich mit 
einer kleinen Amplitude von bis zu mehreren zehn Grad und 
einer extrem schnellen Winkelgeschwindigkeit von bis zu 



Seite - 28 - 



[FileiANM\P04512B1.doc] Beschreibung, 29.01.01 
2nd Sight mit Retina Scan 
PHYSOPTICS Opto-Electronic GmbH 



mehreren hundert Grad pro Sekunde hin und her bewegt . Bei 
der Verfolgung eines sich bewegenden Objekts erreicht das 
Auge 280 Winkelgeschwindigkeiten von lediglich eins bis 
zwei hundert Grad pro Sekunden. 

5 

Zum Schutz des Augapfels 280 hat der Mensch bewegliche 
Hautfalten, namlich ein Oberlid 27a und ein Unterlid 27b, 
die ein SchlieSen der Augenhohle 20 gegen auSere Einflusse 
ermoglicht. Die Lider 27a und 27b schlieSen sich 

10 ref lektorisch bei einfallenden Fremdkorpern und starker 
Blendung. Daruber hinaus sorgen die Lider 2 7a und 27b durch 
regelmaSigen, meist unwillkur lichen Lidschlag fur einen 
gleichmafiig auf der Hornhaut 2 83 verteilten Tranenfilm, der 
die auSere Oberflache der Hornhaut 2 83 vor einem 

15 Austrocknen wahrt und wascht. Die Lider 27a und 27b weisen 
auch Wimpern 2 7c auf, die das Auge 280 ebenfalls vor Staub 
schutzen. Eine Bindehaut 2 6 kleidet den Raum zwischen den 
Lidern 2 7a bzw. 2,7b, der Aughohle 2 0 und dem Augapfel 28 0 
aus. Die Bindehaut 26 geht einerseits in die Lidinnenseite 

20 uber, andererseits in die Hornhaut 283, und stellt einen 
zweiten Schutzwall gegen das Eindringen von Keimen und 
Fremdkorpern dar. 



25 



Figur 3 



Figur 3 zeigt im Detail eine erste Aus fuhrungs form der 
optischen Vorrichtung des wie oben beschriebenen, 
interaktiven Brillensystems bzw. Brille 320 als Bestandteil 
des interaktiven Datensicht- und Bediensystems . Es ist eine 

3 0 Signalerf as sungs vorrichtung in Form einer scannenden 
Augenabt as t vorrichtung 350D vorgesehen ist. Dabei stellt 
die linke Bildhalfte eine Draufsicht auf den Kopf eines 
Benutzers 302 samt Brille 320 mit rechtem Biigelteil 321R 
dar, wahrend die rechte Bildhalfte ein durch den linken 

35 Bugelteil 321L verlaufenden Querschnitt der Brille 320 
wiedergibt. AuSer der zur interaktiven Brille 320 
gehorenden Vorrichtungen sind in der Figur 3 keine weiteren 
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Komponenten der erf indungsgemaSen Inf ormat ions system 10 0 
abgebildet . 

GemaS der abgebildeten Ausfuhrungsform werden auf das Auge 
380- fallende Lichtstrahlen 333a und 333b, die 
beispielsweise aus dem Gesichtsfeld stammen, von der Linse 
3 82 auf der Netzhaut 381 als zusammenhangendes Bild scharf 
abgebildet und von ihr als' Netzhautref lexbild 
zuruckref lektiert . Ein so zuruckref lektierter Lichtstrahl 
331 passiert in ungekehrte Richtung erneut die Linse 382, 
wird uber zwei, zum Spiegelsystem der Br i lie 320 gehorende 
konkave Spiegel 3 22 und 3 23 fokussiert und wie abgebildet 
auf eine scannende Augenabtastvorrichtung 350D gelenkt . Die 
Augenabtastvorrichtung 35 0D umfaSt eine 

Signalerfassungsvorrichtung 351 in Form eines Fotodetektors 
351, der den von der Netzhaut 381 zuruckref lektierten 
Lichtstrahl 331 erfafit, sowie zwei bewegliche Flachspiegel 
3 52H und - 3 52V, die eine horizontale bzw.- ver.tikale 
Ablenkung des Lichtstrahls 331 auf .den Fotodetektor 3 51 
bewirken. GemaS der Ausfiihrung der Figur 3 umfaSt die 
Brille 320 zusatzlich eine Lichtfalle 324, die einen 
Lichteinfall aus unerwunschten Einf allsrichtungen 

verhindert. Zur Vereinf achung des Spiegelsystem der Brille 
320 kann der. Spiegel 3 23 durch eine verspiegelte 
Innenoberf lache des Brillenglases verwirklicht werden. 
Allerdings muE die Oberflache eine bestimmte Form 
aufweisen, urn eine Erfassung des gesamten 

Netzhautref lexbildes auch bei einer eventuellen verdrehten 
Stellung des Auges 3 80 zu ermoglichen . Dies schrankt 
wiederum die Gestaltungsmoglichkeiten der Brille 320 ein. 

Durch die Kombination eines punktf ormigen Detektors 3 51 mit 
entsprechender Steuerung der Flachspiegel 352H und 352V 
erfolgt eine serielle punktuelle Abtastung des 
Netzhautref lexbildes als Bildpunktf olge . Bevorzugt wird die 
Netzhaut 381, wie in der DE 196 31 414 Al und der DE 197 28 
890 beschrieben, mit einem kreis-, spiral- oder 
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ellipsenformigen Scanmuster abgetastet. Dies hat den 
Vorteil, daS die Flachspiegel 352 ohne ruckartigen 
Bewegungen angetrieben werden konnen, und daS eine hohere 
Bildpunktdichte. (Anzahl der Bildpunkte pro Flacheneinheit 
der Netzhaut) im Bereich der Fovea centralis 286 sich 
erfassen laSt . 

Dem Auf nahmevorgang vorgeschaltet wird - soweit noch nicht 
in einem vorhergenden Proj ektionsvorgang geschehen 
vorzugsweise ein geeigneter Synchronisationsvorgang zur 
Bestimmung der momentanen Sehachse, damit der Scanvorgang 
augenzentriert durchgefuhrt werden kann. 

Figur 4 

Figur 4 zeigt im Detail ein verwendbare Ausf uhrungsf orm der 
interaktiven Brille 420, bei der eine Ausgabevorrichtung in 
Form einer . scannenden Pro j ekt ions vorrichtung 45 OP 
vorgesehen ist." Dabei stellt die .linke Bildhalfte eine 
Draufsicht auf den Kopf eines Benutzers 402 samt Brille 420 
mit rechtem Biigelteil 421R dar, wahrend die rechte 
Bildhalfte ein durch den linken Bugelteil 421L verlaufenden 
Querschnitt der Brille 420 wiedergibt. AuSer der zur 
interaktiven Brille 420 gehorenden Vorrichtungen sind in 
der Figur 4 keine weiteren Komponenten der 
erf indungsgemaSen Inf ormationssystem 100 abgebildet. 

GemaS der abgebildet en Ausf uhrungsf orm umfaSt die scannende 
Proj ekt ionsvorrichtung 45 OP eine einen 

Projektionslichtstrahl 432 emittierende Lichtquelle 453, 
beispielsweise eine Laserdiode oder eine iiber ein 
Linsensystem fokusierte LED, sowie zwei bewegliche 
Flachspiegel 454H und 454V. Der Projektionslichtstrahl 432 
wird iiber die beweglichen Flachspiegel 454H und 454V auf 
ein Spiegelsystem der Brille 420 gelenkt, das zwei konkave 
Spiegel 422 und 423 umfaSt, die den Projektionslichtstrahl 
432 auf die Linse 482 eines Auges 480 und schlieSlich auf 
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die Netzhaut 481 wirft. Zur Vereinf achung des Spiegelsystem 
der Brille 420 kann der Spiegel 423 durch eine verspiegelte 
Innenoberf lache des Brillenglases verwirklicht werden. 
Allerdings mu£ die Oberflache eine bestimmte Form 
aufweisen, urn eine Projektion auf alle Bereiche der 
Netzhaut 481 auch bei einer eventuellen verdrehten Stellung 
des Auges 480 zu ermoglichen. Dies schrankt wiederum die 
Gestaltungsmoglichkeiten der Brille 420 ein. Zur Vermeidung 
storender Lichteinf alle laSt sich die Brille 420 mit einer 
Lichtfalle 424 ausstatten, die Lichteinf alle aus 
unerwiinschten Einf allsrichtungen verhindert . 

Durch die Kombination einer punktf ormigen Lichtquelle 453 
mit entsprechender Steuerung der Flachspiegel 452H und 
452V, die jeweils eine horizontale bzw. vertikale Ablenkung 
des Projektionslichtstrahls 432 bewirken, erfolgt eine 
serielle punktuelle Projektion eines Bildes. Bevorzugt 
erfolgt die Projektion, wie in der DE 196 31 414 Al und der 
DE 197 28 890 beschrieben, mit einem kreis- , spiral- oder 
ellipsenf ormigen Scanmuster. Dies hat den Vorteil, da£ die 
Flachspiegel 452 ohne riickartigen Bewegungen angetrieben 
werden konnen, und daE sich eine hohere Bildpunktdichte im 
Bereich der Fovea centralis 286 auf die Netzhaut 481 
projizieren laSt . 

Projektion 

Der Grad der Wahrnehmung eines in das Auge 480 projizierten 
Bildes kann im Verhaltnis zum natiirlich wahrgenommenen Bild 
durch die Helligkeit der projizierten Bildpunkte gesteuert 
werden. Allerdings ist die retinale Wahrnehmung ein 
zutiefst komplexer Vorgang, bei der auch psychologische 
Effekte eine sehr starke Rolle spielen. Hier wird auf die 
einschlagige Fachliteratur verwiesen. 

Vereinf acht laEt sich jedoch sagen, daS die Retina 481 sich 
auf die Helligkeit des insgesamt auf sie fallenden Lichtes 
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einstellt. Es ist zum Beispiel bekannt, daS das geringe 
Leuchten der Uhr eines Radioweckers , das bei Tageslicht gar 
nicht wahrgenommen wird, bei dunkler Nacht ein ganzes 
Zimmer zu erleuchten- scheinen kann." Andersherum ist das 
5 starke Scheinwerf erlicht entgegenkommender Fahrzeuge bei 
Tageslicht kaum wahrnehmbar. Es wird also die Helligkeit 
eines einzelnen Bildpunktes in Relation zu den ansonsten 
wahrgenommenen Bildpunkte empfunden. Auch lokal betrachtet, 
funktioniert die Retina 481 ahnlich. Ubersteigt die 

10 Helligkeit eines . auf einen Gebiet der Retina 481 
projizierten Bildpunkt die Helligkeit des ansonsten auf 
dieses Gebiet fallenden Lichtes urn ca. 10%, so wird 
effektiv lediglich der projizierte Bildpunkt anstelle des 
sonstigen Lichts von diesem Gebiet der Retina 481 

15 wahrgenommen. Aufgrund psychologischer Effekte kann der 
genaue Wert statt bei 10% auch zwischen 5%-10%, 10%-15% 
oder gar 15%-20% liegen. 

-Dem Pro jekt ions vorgang vorgeschaltet . wird - soweit noch 

2 0 nicht in einem vorhergenden Scanvorgang geschehen - bei 

Bedarf vorzugsweise ein geeigneter Synchronisations vorgang 
zur Bestimmung der momentanen Sehachse, damit der 
Pro jekt ions vorgang augenzentriert durchgefuhrt werden kann. 

25 Figur 5 

Figur 5A zeigt eine interaktive Brille 520 gemaS einem 
vierten bevorzugten Ausf lihrungsbeispiel r bei der eine 
kombinierte Signaler f assungs - und Pro j ektionsvorrichtung 

3 0 550 im Bereich des Nasenstegs 522 an die Brille 520 

angebracht ist. GemaS der Detail zeichung 5B umfaSt die 
kombinierte Signalerf assungs- und Pro j ektionsvorrichtung 
550 sowohl eine Pro j ektionsvorrichtung 553 als auch eine 
Signalerf assungsvorrichtung, die zusammen in einem 
3 5 schutzenden Gehause 5 58 untergebracht sind. Durch ein 
lichtdurchlassiges Fenster 559 in einer AuSenwand des 
Gehauses 558 gelingen Lichtstrahlen 530 in das Innere des 
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Gehauses 558 unci umgekehrt . Das Abschliefien des Gehauses 
558 durch das Fenster 559 verhindert jedoch, daS Staub, 
Schweifi und andere Fremdstoffe den Betrieb der kombinierte 
Signaler fassungs- und Proj ektionsvorrichtung 550 stort. 



Analog den beschriebenen Systemen gemafi Fig. 3 und 4 werden 
Lichtstrahlen 530, 530a, 530b erfafit bzw. projiziert. Die 
interaktive Brille 520 laSt sich jedoch in ihrem Aufbau 
dadurch vereinf achen, daS die im Stand der Technik 

10 getrennten Spiegel 352 bzw. 452 zur vertikalen bzw. 
horizontalen Ablenkung des jeweiligen Lichtstrahls 331 bzw. 
432 durch einen Taumelspiegel 552 bzw. 554 ersetzt wird. 
Zwecks einer kompakten Bauweise kann ein teildurchlassiger 
Spiegel 556 dazu dienen, separate Strahlengange innerhalb 

15 des Gehauses 558 fur das durch das Fenster 559 fallende 
bzw. projizierte Licht 53 0 zu ermoglichen. Bevorzugt wird 
die Innenseite des Brillenglases mit einer fur aus dieser 
Richtung einfallenden Strahlen stark - ref lektierenden 
pberflache 52 3 versehen, die- als Spiegel fur den 

2 0 Strahlengang zwischen dem Auge 580 und dem kombinierten 
Signalerf assungs- und Proj ektionsvorrichtung 550 verwendet . 
Dies tragt zu einer Reduzierung der notwendigen Komponenten 
bei und fiihrt in der abgebildeten Ausf uhrungsf orm zu einem 
vereinf achten, lichtstarken Strahlengang 53 0, bei dem der 

25 Lichtstrahl 530 zwischen Auge 580 und Projektions- bzw. 
Signalerf assungsvorrichtung 553 bzw. 551 lediglich dreimal 
reflektiert wird. Wie oben beschrieben, ergibt sich jedoch 
hieraus eine Einschrankung der Gestaltungsmoglichkeiten der 
Brille 520. 



Die fur eine Taumelbewegung des Spiegels 552, 554 
notwendige Bewegungsf reiheit lafit sich beispielsweise durch 
eine kardanische oder federnde Aufhangung des Spiegels 552, 
554 erreichen. Mogliche Ausf uhrungsar ten eines derartigen 
3 5 Taumel spiegels sind dem Fachmann beispielsweise aus dem 
Gebiet der Mikrotechnik bekannt . Weitere Losungen des 
vorliegenden Ablenkungsproblems , bei der der jeweilige 



5 



30 
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Lichtstrahl 53 0 auf der Basis elektrochromer, 
holographischer, elektroholographischer oder sons tiger 
Lichtbrechungs- oder Lichtref lektionsmechanismen gelenkt 
wird, sind ohne weiteres denkbar und ebenfalls anwendbar. 

Obwohl die interaktive Brille 52 0 in einer minimalistischen 
Ausfuhrungsform gezeigt ist, bei der eine kombinierte 
Signalerf assungs- und Pro j ekt ions vorrichtung 550 lediglich 
fur das linke Auge 58 0 vorgesehen ist, ist es 
selbstverstandlich, daS eine spiegelverkehrt gebaute, 
zweite kombinierte Signalerf assungs- und 

Projektionsvorrichtung 550 im Bereich der rechten Halfte 
des Nasenstegs 522 fur das nicht dargestellte rechte Auge 
bei Bedarf vorgesehen werden kann. 

Figur 6 



20 



^' 25 



30 



35 



Figur 6A zeigt in Form einer Abanderung der in den Figuren 
5A und 5B dargestellten Brille 520 eine interaktive Brille 
62 0 gemaS einem fiinften bevorzugten Ausf ixhrungsbeispiel, 
bei der die linke kombinierte Signalerf assungs- und 
Proj ekt ions vorri chtungen 650L in dem zwischen dem linken 
Brillenglas 624L und dem linken Bugelteil 621L liegenden 
Bereich und die rechte kombinierte Signalerf assungs- und 
Proj ektionsvorrichtungen 650R in dem zwischen dem rechten 
Brillenglas 624R und dem linken Bugelteil 621R liegenden 
Bereich angeordnet sind. 

Eine solche Anordnung der kombinierte Signalerf assungs- und 
Proj ektionsvorrichtungen 65 0L, 65 OR gegenuber den 
jeweiligen Brillenglasern 624L, 624R und den jeweiligen 
Augen 680 ist normalerweise mit der Notwendigkeit 
verbunden, entweder mehrere Spiegel entlang des 
Strahlengangs 630 vorzusehen (vgl. Spiegel 322 und 323 in 
Figur 3) oder dem jeweiligen Brillenglas 624L, 624R eine 
besondere Form zu verleihen, um eine Erfassung aller 
Bereiche der Netzhaut 681 zu gewahrleisten . Dies schrankt 
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jedoch die Gestaltungsmoglichkeiten der Brille 620 
erheblich ein. Urn dieses Problem zu umgehen, sieht die 
interaktive Brille 620 gemaS Figur 6 Brillenglaser 624L, 
624R vor, deren Innenseite mit einer jeweiligen 
holographischen Beschichtung 623L, 623R versehen sind. 
Solche holographischen Beschichtung 623 sind in der Lage, 
eine beliebige Ref lektionstopologie zu emulieren. Zum 
Beispiel kann eine holographisch beschichtete, flache 
Oberflache wie eine spharisch gekrummte Ober flache wirken. 
Ebenso kann eine holographisch beschichtete, spharisch 
gekrummte Oberflache wie eine flache Oberflache wirken. Die 
Anderung der effektiven Ref lektionstopologie hangt 
lediglich vom holographischen Inhalt der Beschichtung ab. 
GemaS der Abbildung sind die holographischen Beschichtungen 
623L und 623R spiegelsymmetrisch zueinander ausgebildet und 
angeordnet . 

Figur 6B enthalt eine Detail zeichnung der kombinierte 
Signalerfassungs- und Pro j ektionsvorr ichtungen 650L. Analog 
der in der Figur -5B darges tell ten kombinierteh 
Signalerfassungs- und Proj ektionsvorrichtung 550 umfaSt sie 
ein Gehause 658, eine Pro j ektionsvorrichtung 653 und eine 
Signalerf assungsvorrichtung 651, j eweilige Taumelspiegel 
652 und . 654, einen teildurchlassigen Spiegel 656 und ein 
Gehausef enster 659 . 



Figur 7 

Ahnlich den Figuren 6A und 6B zeigt Figur 7A in Form einer 
Abanderung der in den Figuren 5A und 5B dargestellten 
Brille 520 eine interaktive Brille 720 gemaS einem sechsten 
bevorzugten Ausf iihrungsbei spiel , bei der die linke 
kombinierte Signalerfassungs- und Proj ektionsvorrichtungen 
750L in dem zwischen dem linken Brillenglas 724L und dem 
linken Bugelteil 721L liegenden Bereich und die rechte 
kombinierte Signalerfassungs- und Pro j ektionsvorrichtungen 
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750R in dem zwischen dem rechten Brillenglas 724R und dem 
linken Bugelteil 721R liegenden Bereich angeordnet sind. 



Figur 7B enthalt eine Detailzeichnung der kombinierte 
Signalerfassungs- und Projektionsvorrichtungen 75 0L. Analog 
der in der Figur 5B dargestellten kombinierten 
Signalerfassungs- und Proj ektionsvorrichtung 550 umfaBt sie 
ein Gehause 758, eine Proj ektionsvorrichtung 753 und eine 
Signalerfassungsvorrichtung 751, jeweilige Taumelspiegel 
752 und 754, einen teildurchlassigen Spiegel 756 und ein. 
Gehausef enster 759. 



Das oben angesprochene Problem des Strahlengangs 73 0 wird 
bei diesem Ausf uhrungsbei spiel durch besonders 
ausgestaltete Pads 725L und 725R platzsparend gelost. 
Typischerweise werden Brillen 72 0 entweder durch den 
Nasensteg 722 oder durch sogenannte Pads 725 auf der 
Nasenwurzel gestiitzt. . In ihrem handelsublichen Gestalt sind 
Pads relativ flach, leicht gekrummt und~ ovai. Zudem sind 
sie entweder schwenkbar oder taumelnd an einem vom 
Nasensteg 722 ausgehenden Vorsprung gelagert, urn ein 
angenehmes Anliegen der Pads, an die Seitenf lachen der 
Nasenwurzel zu gewahrleisten. Im abgebildeten 

Ausfuhrungsbeispiel sind die Pads 725 als formfeste, 
langliche Einheiten ausgebildet, die im Bereich des 
Nasenstegs 722 von der Brille 720 in Richtung Auge 780 
herausragen. Auf ihrer jeweiligen, der Nase zugewandten 
langlichen Seite bilden die Pads 725 die sich auf die 
Nasenwurzel stutzende Auf liegef lache . In ihrem der Brille 
72 0 gegenuber liegenden Endbereich weisen die Pads 725 auf 
der jeweilig dem Auge zugewandten Seite eine- Tragf lache 
auf, die mit einem Spiegel oder einer spiegelnden 
Beschichtung, beispielsweise einer Metallbeschichtung oder 
einer holographischen Beschichtung, versehen ist. 

Obwohl das Gestell der Brille 720, einschlieSlich die Pads 
725, eine im Prinzip feste Form aufweist, treten sowohl 



Seite - 37 - 



[File:ANM\P0451 2B1.doc] Beschreibung, 29.01.01 
2nd Sight mit Retina Scan 
PHYSOPTICS Opto-Electronic GmbH 



quasi -statische, z.B. durch Materialernuidung und/oder 
Tempera turanderungen, als auch dynamische Verf ormungen des 
Gestells auf . Insbesondere beim Aufsetzen der Brille 720 
und bei erschutterungsreichen Aktivitaten ergeben sich 
Veranderungen der relativen Anordnung der jeweiligen 
Brillenkomponenten zueinander. Auch ist die relative 
Anordnung der Brille 720 . gegenuber dem Auge 780 keine 
Konstante. DemgemaS mug sowohl das optische System der 
Brille 72 0, d.h. diejenigen Systemkomponenten, die zur 
optischen Signalerf assung bzw. zur optischen Projektion 
beitragen, als auch ein eventuell daran angeschlossenes 
Verarbeitungssystem derart konzipiert und ausgelegt sein, 
daS solche Anordnungsverandemngen berucksichtigt und/oder 
kompensiert werden konnen bzw. keine auSerordent lichen 
Betriebsstorungen verursachen. Dies gilt fur alle Arten von 
interaktiven Brillensystemen. 

Erf indungsgemaS laSt sich das zuvor angesprochene Problem 
insbesondere durch eine geeignete Signalverarbeitung der 
erfaEten und der. "zu erzeugenden Signale bewaltigen. " Es 
konnen auch fest am Brillengestell in der Nahe des ublichen 
Strahlengangs 73 0 angebrachte optische Markierung von der 
Signalerfassungsvorrichtung 751 zwecks Eichung ihres 
optischen Systems regelmaSig oder bei Bedarf mit erfaSt 
werden. 

Figur 8 

Figur 8 zeigt in Form einer Abanderung der in den Figuren 
5A und 5B dargestellten Brille 52 0 eine interaktive Brille 
gemaS einem siebten bevorzugten Ausf uhrungsbeispiel , bei 
der die Signalerfassungsvorrichtung 851 der kombinierten 
Signalerf assungs- und Pro j ektionsvorrichtungen 850 in der 
Lage ist, das . Hornhautref lexbild mindestens partiell zu 
erf assen. 
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Die Hornhaut ist normalerweise rotationssymmetrisch zur 
Sehachse ausgebildet. Strahlen, die senkrecht auf einen 
zentralen Bereich der Hornhaut fallen, sind somit konfokal 
zum optischen System des Auges 880 und bilden die Basis des 
von der Netzheut 8 81 tatsachlich . wahrgenommenen 
Bildes.Zudem besteht die Hornhaut 883 zum grofiten Teil aus 
Wasser und weist aus diesem Grunde einen sehr hohen 
Ref lektionsgrad bei einer Wellenlange von ca. 1,1 /xm auf. 
Da diese Wellenlange im infraroten Spektralbereich liegt, 
eignet sich eine Erfassung .des Hornhautref lexbildes 
vorwiegend fur Inf rarotanwendungen, beispielsweise bei 
Nachtsichtgeraten. Allerdings finden Reflektionen nicht nur 
an der auSeren, konkaven Hornhautoberf lache, sondern auch 
im Inneren der Hornhaut statt. Zudem bewirkt die Hornhaut 
883 aufgrund ihrer Struktur keine spiegelartige , sondern 
eine diffuse Reflektion, die mit zunehmender Tiefe des 
Ref lektionsereignisses im Inneren der Hornhaut diffuser 
wird.- 

Um ein sinnvolles Hornhautref lexbild zu erhalten, werden im 
abgebildeten Aus fiihrungsbei spiel effektiv nur diejenigen 
Strahlen, die senkrecht auf einen zentralen Bereich der 
Hornhaut fallen, erf aSt . Dies wird durch mehrere MaSnahmen 
erreicht. Erstens weist das vor dem Auge gelagerte 
Brillenglas 824, dessen dem Auge 880 zugewandte Seite mit 
einer fur aus dieser Richtung einfallenden Strahlen stark 
ref lektierenden Oberf lache 823 versehen ist, eine besonders 
gestaltete Form auf, die das senkrecht von der Hornhaut 
reflektierte Licht derart biindelt, da£ es als beinah 
parallel verlaufende Lichtstrahlen 834 auf die 
Signalerf assungsvorrichtung 851 fallt, wahrend nicht 
senkrecht von der Hornhaut ref lektiertes Licht in eine 
andere Richtung gelenkt wird. Alternative kann das 
Brillenglas 824 andersartig gestaltet sein, jedoch eine 
teilsdurchlassige holographisch ref lektierende Schicht 823 
aufweisen, die ebenfalls eine derartige Bundelung des 
senkrecht von der Hornhaut ref lektierten Lichtes bewirkt, 
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daS es als beinah parallel verlaufende Lichtstrahlen 834 
auf die Signalerf assungsvorrichtung 851 fallt, wahrend 
nicht senkrecht von der Hornhaut ref lektiertes Licht in 
eine andere Richtung gelenkt wird. Zweitens wird eine 
Blende 857 kurz vor der Signalerf assungsvorrichtung 851 
vorgesehen, die eine Erfassung derjenigen Lichtstrahlen 
verhindert, deren Einf allswinkel auSerhalb einem engen 
Einf allswinkelbereich der wie oben beschriebenen, beinah 
parallel verlaufenden Lichtstrahlen 834 liegt. 

Figriir 9 



Figur 9 zeigt in Form einer Abanderung der in den Figuren 
5A und 5B dargestellten Brille 52 0 eine interaktive Brille 

15 gemafi einem achten bevorzugten Ausf uhrungsbeispiel , bei der 
ein spharisches oder spharisch wirkendes teildurchlassiges 
spiegelndes Zusatzelement 929 zwischen dem Brillenglas 924 
- und dem Auge 980 angeordnet ist. Bevorzugt' 1st das 
Zusatzelement 92 9 konfokal zum optischen System des Auges 

20 98 0 angeordnet. 



l 4*S 25 



30 



35 



Der Ref lektionsgrad eines solchen Zusatzelements 929 lafit 
sich an die Bediirfnisse des Inf ormationssys terns anpassen. 
Es kann zwischen einem hohen Ref lektionsgrad, was eine sehr 
gute Erfassung auf das Auge 980 gerichteter Lichtstrahlen 
933a- 933c ermoglicht, und einem niedrigen Ref lektionsgrad, 
was eine Beeintrachtigung der durch das Auge 98 0 
erfolgenden Wahrne hmung vermeidet, gewahlt werden. 
Bevorzugt weist das Zusatzelement 929 einen niedrigen 
(beispielsweise unter 10%) , iiber seine gesamte 
Ref lektionsf lache homogen Ref lektionsgrad auf. Dahingegen 
weisen ref lektierende Organe des Auges 980, zum Beispiel 
die Kornea 983 oder die Retina 981, zum Teil sehr starke 
ortliche Ref lektionsabhangigkeiten. Ahnliche Aussagen 
betreffen die spektralen Ref lektionsabhangigkeiten des 
Zusatzelements bzw. der ref lektierenden Organe des Auges 
980. Wahrend das Zusatzelement 929 bevorzugt derart 
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ausgebildet werden kann, daS es einen homogenen 
Ref lektionsgrad iiber alle relevanten Spektralbereiche 
aufweist, weisen die verschiedene Organe des Auges 980 sehr 
unterschiedliche Absorbtionsgrade auf , die in vielen Fallen 
5 auch starke ortliche Schwankungen unterworfen sind. 

AuSer der Teilref lektion soil das Zusatzelement 929 
moglichst keine Auswirkung auf das darauf fallende Licht 
ausuben. Aus diesem Grund wird das Zusatzelement 92 9 

10 bevorzugt aus einem homogenen lichtdurchlassigen und 
ungefarbten Material und mit einer in Richtung der auf den 
Augenmittelpunkt gerichteten Lichtstrahlen konstanten Dicke 
gefertigt. Durch das Aufbringen einer 

Antiref lexbeschichtung auf der dem Auge 98 0 zugewandten 

15 Seite des Zusatzelements 92 9 laSt sich eine verbesserte 
Lichtdurchlassigkeit erzielen. 

Die ref lektierende Kontur eines solchen Zusatzelements 929 
ist " wohl definiert, und . kann dem Inf ormationssystem 

20 demgemaS als bekannte Information zur Verfiigung gestellt 
werden, wahrend die Kontur der relevanten ref lektierenden 
Organe des Auges 980 erst ermittelt werden muS. Letzteres 
kann mit zum Teil nicht unerheblichem Aufwand verbunden 
sein. Die Erfassung auf das Auge 980 gerichteter 

25 Lichtstrahlen 933a-933c iiber ein solches Zusatzelement 929 
kann somit hochwertige Bilder des Blickfeldes lief em. 

Im abgebildeten Aus fuhrungsbei spiel werden effektiv nur 
diejenigen Strahlen, die senkrecht auf das Zusatzelement 
30 929 fallen, erf aSt . Dies wird durch die folgenden MaSnahmen 
erreicht : 

Aufgrund der teilsref lektierenden Oberflache des 
Zusatzelements 92 9 wird ein entsprechender Teil derjenigen 
35 Strahlen 933a- 933c, die senkrecht auf die Oberflache des 
Zusatzelements 92 9 fallen, senkrecht zuruckref lektiert , 
wahrend andere Strahlen von der Oberflache des 
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"Einfallswinkel gleich Ref lektionswinkel" entsprechend 
schrag zuruckref lektiert werden. Die senkrecht zur 
Oberflache des Zusatzelements 92 9 zuriickref lektierten 
Lichtstrahlen legen den gleichen Weg zuriick, den sie 
gekommen sind, und treffen somit auf das dem Auge 
vorgelagerte Brillenglas 924. Die dem Auge 980 zugewandte 
Seite des Brillenglases 924 ist mit einer fur aus dieser 
Richtung einfallenden Strahlen stark ref lektierenden 
Oberflache 923 versehen, und weist eine besonders 
gestaltete Form oder eine besonderes ausgebildete 
Beschichtung auf, die die senkrecht vom Zusatzelement 
ref lektierten Lichtstrahlen derart btindelt, daS sie als 
beinah parallel verlaufende Lichtstrahlen 934 auf die 
Signalerfassungsvorrichtung 951 fallen, wahrend nicht 
senkrecht vom Zusatzelement reflektierte Lichtstrahlen in 
eine andere Richtung gelenkt werden. Desweiteren wird eine 
Blende 957 kurz vor der Signalerfassungsvorrichtung 951 
vorgesehen, die eine Erfassung derjenigen Lichtstrahlen 
verhindert, deren Einfallswinkel aufierhalb einerri engen 
Einfallswinkelbereich der wie oben beschriebenen, beinah 
parallel verlaufenden Lichtstrahlen 934 liegt. 

Soli das uber das Zusatzelement 929 erfaSte Bild des 
Gesichtsf eldes die Grundlage fur eine mit dem tatsachlich 
wahrgenommenen Gesichtsf eld korrelierte Projektionen, so 
muB die Korrelation zwischen dem erfaSten Licht und dem 
wahrgenommenen Gesichtsf eld ermittelt werden. GemaS dem 
dargestellten fiinften Ausf uhrungsbeispiel wird diese 
Korrelation durch eine bevorzugte konfokale Anordnung des 
Zusatzelements 929 zum optischen System des Auges 980 
erreicht. Es wird deshalb bevorzugt, da£ das Zusatzelement 
92 9 uber eine justierbare Aufhangung derart an der Brille 
befestigt ist, dafi sich die Position des Zusatzelements 929 
sowohl in vertikaler als auch in zwei horizontalen 
Richtungen nachjustieren laSt . 
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Konf okalitat ist im grundegenommen dann gegeben, wenn das 
Zusatzelement 92 9, optisch gesehen, rotationssymmetrisch 
zur Sehachse und mit einem Abstand zur Linse 982 angeordnet 
ist, dafi der optische Mittelpunkt des optischen Systems des 
5 Auges mit dem Mittelpunkt der durch das spharische oder 
spharisch wirkende Zusatzelement definierten Kugel 
ubereinstimmt . Die Sehachse lafit sich zu diesem Zwecke 
ausreichend iiber die Ausrichtung der Pupille 984 bestimmen, 
die durch ihre scharfe Konturen leicht erkennbar ist, und 

10 der en Ausrichtung aufgrund ihrer runden Form licht 
bestimmbar ist. Zudem ist aufgrund der sparischen oder 
spharisch wirkenden Form des Zusatzelements 92 9 keine 
Schwenkung des Zusatzelements 92 9 urn die moglichen 
Schwenkachsen des Auges 980 notwendig, urn Konf okalitat zu 

15 gewahrleisten. Derm auch bei einer Verdrehung des Auges 
bleibt durch eine entsprechende vertikale und/oder 
horizontale Verschiebung des Zusatzelements 92 9 zumindest 
ein wesentlicher Teil des Zusatzelements 929, optisch 
gesehen, rotationssymmetrisch zur Sehachse. Was den Abstand 

20 zur Linse 982- betrifft, gibt es verschiedene Mogllchkeiten, 
den notwendigen Abstand zu bestimmen. Zum Beispiel kann 
eine optische oder akustische Vermessung der Hornhaut 983 
vorgenommen werden, deren Krummung einen sehr gut en 
Richtwert fur die richtige Anordnung des Zusatzelements 92 9 

25 angibt . Es konnen auch Netzhaut- oder Hornhautref lexbilder 
zumindest partiell erfafit werden, und anhand eines 
Vergleichs der Reflexbilder mit dem iiber das Zusatzelement 
92 9 er faSten Licht der richtige Abstand bestimmt werden. 

3 0 Aufgrund der spharischen oder spharisch wirkenden 
Realisierung, beispielsweise durch eine holograph! sche 
Beschichtung, der teilsref lektierenden Oberflache des 
Zusatzelements 92 9 sowie durch diese konfokale Anordnung 
des Zusatzelements zum Auge 980 sind lediglich diejenigen 

35 Strahlen 933a-933c, die senkrecht auf die Oberflache des 
Zusatzelements 929 fallen, konfokal zum optischen System 
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des Auges 98 0 und stimmen somit mit den auf die Netzhaut 
fallenden Strahlen iiberein. 

Figur 10 

5 

Figur 10 zeigt eine Draufsicht (Fig. 10A) und eine 
Frontansicht (Fig. 10B) einer Brille 1020 gemaS einem 
neunten Ausf lihrungsbeispiel bei dem zwei Sensorvorrichtung 
1061R und 1061L, beispielsweise zwei Festkorper-Kameras , 

10 zum Beispiel CCD- oder TTL-Kameras , zwecks weiterer 
Signalerf assung, insbesondere aus dem sichtbaren Blickfeld, 
vorgesehen sind. Die Figur 10B zeigt auch das linke und 
rechte Auge 1080L bzw. 1080R eines moglichen Tragers 1002 
der Brille 1020. Der Ubersichtlichkeit halber sind jedoch 

15 keine anderen Merkmale des Benutzers 1002 in der Figur- 10B 
dargestellt . 

.Urn das Auftreten einer Parallaxe . zwischen den von - der 
jeweiligen • Kamera 1061R, 1061L und dem ihr zugeordneten 

20 Auge erfaSten bzw. wahrgenommenen " Bildern zu vermeiden, 
sollen die Kameras 1061 den Augen bezuglich ihrer 
"Sehachsen" moglichst achsengleich angeordnet sein. In 
Anbetracht der SystemgroEe solcher Festkorper-Kameras 1061 
hat es sich beim heutigen Stand der Technik als sinnvoll 

25 erwiesen, die Kameras 1061 . wie abgebildet im vorderen 
Bereich der jeweiligen Biigelteile 1021L, 1021R anzuordnen. 
Auch eine Montage im Bereich des Nasenstegs 1022, z.B. in 
den Pads . 1025, ist sinnvoll. Nach einer weiteren 
Miniaturisierung werden die Festkorper-Kameras 1061 im 

30 Brillengestell uber den jeweiligen Brillenglaser 1024L, 
1024R angeordnet werden konnen, um eine weitere 
Achsengleichheit zu erreichen. Es ist absehbar, daS 
Festkorper- oder andersartige Lichterf assungssysteme in der 
Zukunft in das Brillenglas 1024, das selbstverstandlich 

35 auch ein Kunststoff oder sonstiger lichtdurchlassiger Stoff 
sein kann, werden eingebaut werden konnen. Eine solche 
Anordnung der Kameras 10 61 wurde eine mit dem jeweiligen 
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Auge 1080L, 1080R achsengleiche , beinah konfokale 
Signalerf assung ermoglichen. 

Bei einer achsenungleichen Anordnung der 

5 Sensorvorrichtungen 1061 zu den jeweiligen Augen 1080L, 
1080R sollen die aus den Sensorvorrichtungen 1061 
gewonnenen Informationen gegebenenf alls in Korrelation mit 
den Augen 1080 gebracht werden. Eine solche Korrelation ist 
insbesondere dann wichtig , wenn die Sensorvorrichtungen 
10 1061 durch Kameras 1061 realiziert werden, und ein 
Uberlagerungsbild anhand aus den Kameras 10 61 gewonnener 
Bildinf ormationen in das jeweilige Auge 1080L, 1080R 
projiziert werden sollen. 

15 Wird das von den Kameras 10 61 aufgenommene Bild einfach auf 
das jeweilige Auge 1080L, 10 8 OR projiziert, so kommt es zur 
sogenannten Parallaxe, bei der das "Gesichtsf eld" der 
jeweiligen Kamera 1061L, 1061R - nicht mit dem naturlich 
wahrgenommenen Gesichtsfeld ubereinstimmt . Insbesondere bei 

2 0" einer von der Ruhestellung abweichenden Verdrehung der 

Augen 10 8 0 oder bei im naheren Gesichtsfeld liegenden 
Gegenstanden wurde die Parallaxe bei einer Uberlagerung zu 
einer abnormalen Wahrnehmung fiihren. Denn in solchen Fallen 
lage die Sehachse des. Auges 1080 schrag zur "Sehachse" der 
25 jeweiligen Kamera 1061L, 1061R. 

Bei der Korrelation in diesem Sinne wird nur der Teil des 
von den Kameras 1061 erfaSten Bildes in das jeweilige Auge 
1080L, 1080R projiziert, der in entsprechender 

3 0 "Korrelation" zur Sehachse des jeweiligen Auges 1080L, 

1080R liegt. Im einfachsten Fall wird durch die 
Signalerf as sungsvorrichtung 1051 ein zumindest partielles 
Reflexbild des Gesichtsf eldes vom jeweiligen Auge 1080L, 
1080R erfafit. Kennzeichnende Bildpunkte, die sowohl im 
3 5 erfafiten Reflexbild als auch in den von den Kameras 1061 
erfaSten Bilder aufzufinden sind, dienen dann als 
Ref erenzpunkte fur eine perspektivisch richtige Projektion 
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der von den Kameras 1061 erfaEten Bildinf ormationen auf das 
Auge 1080. Ahnlich konnen die aus dem Auge 1080 erfaEten 
Signale dazu dienen, die Blickrichtung des jeweiligen Auges 
1080L, 1080R beziiglich dem Koordinatensystem der - Brille 
5 1020 zu bestimmen, um aus diesen Winkelinf ormationen eine 
mathematisch basierte Korrelation zu durchf uhren . 

Allerdings ist eine Korrelation auch bei Sys t emanwendungen 
sinnvoll, bei denen die Augen 1080 an der Wahrnehmung des 

10 Gesichtsf eldes verhindert werden. Dies ist beispielsweise 
bei der. Anwendung einer geschlossenen, sogenannten "virtual 
reality" Brille 1020 (wie abgebildet, allerdings mit 
lichtundurchlassigen Glasern 1024) der Fall, bei der den 
Augen 1080 lediglich ein kunstlich erzeugtes" Bild 

15 prasentiert wird. Im einem solchen Fall konnte die 
besprochene Korrelation zum Beispiel darin bestehen, daS 
die Blickrichtung des Auges 1080 wie oben beschrieben 
erf aSt wird, und daS ein der . Orientierung des jeweiligen 
Auges 1080L, 1080R entsprechendes , virtuell erzeugtes. Bild 

20 hineinprojiziert wird. Allerdings dient hier die Brille 
102 0 als Koordinatensystem. Wird jedoch noch die Lage und 
Orientierung der Brille 1020, beispielsweise anhand der von 
der Kameras 1061 erfaSten Bildern, ermittelt, so kann eine 
Korrelation zwischen dem jeweiligen Auge 1080L, 1080R und 

2 5 der Umgebung hergestellt werden. Ein solches System lieSe 

sich beispielsweise in einem virtuellen Erlebnishaus , 
ahnlich einem Geisterhaus, anwenden. Jedem, der gerade auf 
einem Laufbahn geht, konnte zum Beispiel ein virtuelles 
Bild in die Augen projiziert werden, das ihm das Gefuhl 

3 0 verleiht, er liefe auf schwimmenden Baumstammen inmitten 

eines wilden Flusses. 

Es soli an dieser Stelle hervorgehoben werden, dass das 
vorstehend anhand der Figuren 5 bis 10 beschriebene 
3 5 Inf ormationssystem nicht unbedingt mit einer kombinierten 
Signalerfassungs- und Pro j ekt ions vorrichtung arbeiten muS . 
Es ist gleichermaSen moglich, mit einer Ausfuhrung des 
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Systems zu arbeiten, bei der die 

Signalerf assungsvorrichtung von der Proj ektionsvorrichtung 
getrennt ist bzw. bei dem eine der beiden Vorrichtungen 
fehlt. 

Figur 11 



GemaS einem zehnten Ausf iihrungsbei spiel umfaSt das 
erf indungsgemaSe Informations system Mittel, die das 
Bereitstellen einer Fernglasf unktion ermoglichen. Die 
Figuren 11A und 11B stellt den wahrnehmbaren Effekt der 
Fernglasf unktion an einen Benutzer dar. Figur 11A zeigt das 
natiirlich wahrgenommene Gesichtsfeld 1190 eines Benutzers 
eines gemaS dem zehnten Ausf iihrungsbeispiel gestalteten 
Informationssystems. Obwohl das Gesichtfeld 1190 horizontal 
ca. 170° und vertikal ca. 110° der Umgebung einschliefit, 
bildet lediglich ein kleiner Bereich 1191 von wenigen Grad 
urn die Sehachse herum den Bereich des schar-fsten Sehens 
1191. * - - - . ■ 

Durch seine Erfassung von Licht aus dem Gesichtsfeld und 
die zuvor beschriebene Moglichkeit einer Projektion von 
Bildinf ormationen in das Auge kann das Inf ormationssystem 
derart ausgestaltet werden, dafi dieser Bereich 1191 
beispielsweise auf Knopfdruck nach entsprechender 
Bearbeitung der erfaSten Bildpunkte mittels einer von der 
• Inf ormationsvorrichtung umfaSten Auswertevorrchtung optisch 
vergroSert auf den Bereich des scharfsten Sehens 1191 
projiziert wird. Wie zuvor beschrieben, kann der Grad der 
Wahrnehmung eines so projizierten Bildes im Verhaltnis zum 
natiirlich wahrgenommenen Bild durch die Helligkeit der 
projizierten Bildpunkte gesteuert werden. Wird das 
Gesichtsf eldlicht beispielsweise als Reflexbild aus dem 
Auge erfaSt, so gewahrleistet eine raumliche oder zeitliche 
Trennung der Erfassung und der Projektion, daS die 
Projektion die Erfassung nicht beeinfluSt. 
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Bei einem handelsublichen Fernglas geht dadurch, dafi das 
gesamte Gesichtsfeld vergroSert dargestellt wird, den 
raumlichen Bezug zur Umgebung verloren. Als Konseguenz ist 
eine durch ein Fernglas schauende Person nicht in der Lage, 
5 sich gleichzeitig dabei f ortzubewegen. Dieses Phenomen ist 
wohl bekannt . 

Dadurch, daS das erf indungsgemalSe Inf ormat ions system durch 
seine Erfassung von Signalen aus dem Auge die Sehachse bzw. 

10 die Position der Fovea centralis relativ zum optischen 
System der Brille ermitteln kann, ist das 
Inf ormat ions system in der Lage, diesen Nachteil eines 
hande Is iib lichen Fernglases zu vermeiden. Zum Beispiel kann 
die Projektion auf eine wie in Figur 11B dargestellte Art 

15 erfolgen, bei der lediglich ein kleiner, im natiirlichen 
Gesichtsfeld unmittelbar urn die Sehachse liegender Bereich 
1191 vergroSert auf die Fovea centralis projiziert wird, 
wahrend keine projizierten Bildinf ormationen dem restlichen 
Gesichtsfeld uberlagert werden. Somit bleibt die vom 

20 Benutzer peripher wahrgenommene Szene trotz teleskopischer 
Darbietung des relevantesten Bereichs des Gesichtsf eldes 
gleich. Urn diesen Effekt zu erzielen, muE die Helligkeit 
der in das Auge hineinproj izierten Bildinf ormationen 
1^ . selbstverstandlich so gewahlt werden, daS das gewunschte. 
( 2 5 Wahrnehmungs verhal tni s zwischen dem natiirlichen und dem 
projizierten Bild entsteht. Dieses System hat auch den 
Vorteil, daE der fur die VergroSerung 

bildverarbeitungsmaSig notwendige Aufwand in Grenzen 
gehalten wird, denn es wird nur ein ausgewahlter 

30. Bildbereich 1191 des Gesichtsf eldes 1190 bearbeitet. 

GemaS einer nicht dargestellten, eleganten Ausf uhirungsf orm 
wird ein VergroSerungsbild derart in das Auge 
hineinproj iziert, daS das projizierte Bild in einem 
3 5 ringformigen Grenzbereich zwischen dem Bereich des 
scharfsten Sehens 1191 und dem restlichen Bereich der 
Netzhaut mit zunehmender Nahe zur Sehachse starker 
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vergrdEert wird. Dabei wird am auBeren Rande gar nicht 
vergroSert und am inneren Rande mit dem gleichen 
"Zoomf aktor 11 vergroSert, wie das in das Innere des Rings, 
d.h. auf die Fovea centralis, projizierte 

VergroSerungsbild. Bei entsprechend gewahlter Helligkeit 
der projizierten Bildinf ormationen entsteht somit ein 
weicher Ubergang zwischen der peripheren Szene und dem 
teleskopisch Gesehenen. 

Die Figuren lie und 11D stellen schemenhaft dar, wie eine 
VergroEerung des auf die Fovea centralis naturlich 
fallenden Bildes durch eine Abanderung eines Abtastmusters 
113 8, 113 9 bei der Abtastung eines Reflexbildes erreicht 
werden kann. Obwohl Proj ektionsmuster 113 7 und Abtastmuster 
113 8, 113 9 in den Figuren 11C und 11D der Erlautemng 
halber in einer gemeinsamen Ebene dargestellt sind, kann es 
bei dem erf indungsgemaEen Inf ormationssystem durchaus sein, 
daS auf die/Netzhaut proj iziert" wird, wahrend die Abtastung 
beispielsweise von der Hornhaut erf olgt . 

Figur 11C stellt ein typisches Abtastmuster 113 8 
schematisch dar, das das das Gesichtsfeld ref lektierende 
Gebiet 118 9 der Hornhaut oder Netzhaut abtastet. Bei diesem 
stark vereinfachten Beispiel wird der Verstandlichkeit 
halber davon ausgegangen, daE die jeweiligen Bildpunkte des 
sequentiell abgetasteten Bildes nach eventueller 
bildverarbeitender Aufbereitung ihrer Reihenfolge nach als 
korrespondierende Bildpunkte des sequentiell in das Auge 
projizierten Bildes zxiriickproj iziert werden. Im 
dargestellten Beispiel stimmt das Abtastmuster 1138 somit 
mit dem Proj ektionsmuster 113 7 trotz eventueller raumlicher 
oder zeitlicher Trennung des Abtast- und des 
Projektionsstrahls uberein. 1st eine VergroEerung eines 
zentralen Bereichs des Gesichtsf eldes erwunscht, so kann 
die Abtastung gemaS einem abgeanderten Abtastmuster 113 9 
erfolgen, das in jenem zentralen Bereich eine Erhohung der 
Dichte der abgetasteten Bildpunkte bewirkt . Werden diese 
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mit erhohter Dichte auf genommenen Bildpunkte bei der 
Projektion korrespondierend, jedoch mit geringerer Dichte 
zurxickproj iziert, so ergibt sich ein vergroSertes Bild. 

5 Figur 12 

GemaS einem elf ten Ausf iihrungsbeispiel stellt das 
erf indungsgemaSe Inf ormationssystem ein Fuhmngssystem dar. 
Zu diesem Zweck umfaSt die Inf ormatiorisvorrichtung des 

10 Inf orma t ions sy s t erne Lagesensoren, beispielsweise 

BeschleunigungsmeSvorrichtungen oder GPS-Empf anger , sowie 
eine Datenbank oder Datenbankanbindung, die 

Orientierungsdaten liefert. Eine derartige Datenbank laSt 
sich beispielsweise iiber einen die Daten tragenden CD-ROM, 

15 einen DVD oder ein anderes austauschbares Speichermedium in 
Verbindung mit einem entsprechenden Lesegerat realisieren. 
Verfahren und Vorrichtungen zur Gewinnung von 
Ortungsinf ormationen, die beispielsweise den Standort " 
bestimmen oder deren Bestimmung ermoglichen, durch eine 

20 Kombination solcher Orientierungsdaten mit aus den 
Lagesensoren gewonnenen Daten sind bekannt . In einer 
typischen Vorrichtung umfassen die Orientierungsdaten 
Karteninf ormationen, die in Zusammenhang mit aus den 
Lagesensoren gelieferten Signal en zur Ortsbestimmung 

2 5 verwendet werden. Die Herstellung einer Korrelation oder 

einer Abhangigkeit beispielsweise bei der Gewinnung oder 
der Darstellung solcher Ortungsinf ormationen zwischen aus 
dem Auge erfaEten Signalen oder aus dem Gesichtsfeld 
erfafiten Licht und dem Zurverf ugungstellen der 

3 0 Inf ormationen ubersteigt das Fachnotorische jedoch bei 

we it em . 

Die Figuren 12A bis 12E zeigen das wahrgenommene 
Gesichtsfeld 1290 eines Benutzers eines gemafi dem elf ten 
35 Aus fiihrungsbei spiel gestalteten Inf ormationssystems . Bei 
einem solchen Informations- bzw. Fuhrungss system wird das 
erfaSte Gesichtsf eldlicht in Anbetracht der gewonnenen 
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Ortungsinf ormationen mittels einer Mustererkennung unter 
Beriicksichtigung der fur den ermittelten Auf enthaltort zur 
Verfiigung stehenden Daten ausgewertet. Dabei werden fur den 
ermittelten Auf enthaltort " zu " erwartende 

5 Orientierungshinweise, wie markante Bauten, SeitenstraSe, 
o. a., erkannt, so daS eine beispielsweise visuelle oder 
akustische Fiihrung bzw. Identif izierung ggf . erfolgen kann. 

Im dargestellten Beispiel gemaS Figur 12A dient das 
10 Fiihrungs system der Navigation. Dabei wir beispielsweise 
anhand einer berechneten oder vorgegebenen Route, zur 
J) Verfiigung stehender Karteninf ormation und des momentanen 

Auf enthaltortes f estgestellt , daS in die ubernachste StraSe 
auf der rechten Seiten eingebogen werden soil. Diese StraSe 
15 wird auf der Basis des erfaSten Gesichtsf eldlichts mittels 
einer Mustererkennung erkannt, woraufhin ein auf die StraSe 
weisender Hinweispfeil per Projektion unter Beriicksichtung 
der durch das System ermittelten Blickrichtung ortsgetreu 
in das Gesichtfeld eingeblendet wird. Ahnlich konnte das 

2 0 Fuhrungs system dem Verkehrsteilnehmer akustische 

Mitteilungen liefern, beispielsweise "Rechts abbiegen nach 
50m" oder "Jetzt rechts' 1 . 

Im in den Figuren 12B und 12C dargestellten Beispiel dient 
0 w ' 25 das Fuhrungs system der Information. Zum Beispiel kann einem 
Benutzer Information uber seine unmittelbare Umgebung 
wahlweise zur Verfiigung gestellt werden. GemaS Figur 12B 
schaut ein das Inf ormationssystem benutzender Tourist ein 
markantes Gebaude an und betatigt eine physikalisch 

3 0 vorhandene oder virtuell in das Gesichtsf eld eingeblendete 

Aktivierungs taste . Das Gebaude wird anschlieSend anhand des 
ermittelten Auf enthaltortes und einer auf das erfaSte 
Gesichtsf eldlicht basienden Mustererkennung oder eines die 
Kopfrichtung bestimmenden elektronischen Kompasses 
35 bestimmt, woraufhin Inf ormationen zu dem Gebaude zur 
Verfiigung gestellt werden. Diese konnen aus einer Datenbank 
oder sonstiger Inf ormationsquelle stammen und lieSen sich 
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beispielsweise interaktiv iiber ein kontextabhangiges Menu, 
das die zur dem jeweiligen Gebaude zur Auswahl stehenden 
Informationen visuell oder akustisch auflistet, auswahlen. 
Die Selektion konnte iiber eine Sprachsteuerung oder durch 
eine Fixierung mit den Augen erfolgen. Naheres zur 
augengesteuerten Meniifiihrung wird in einem spateren 
Abschnitt dieser Beschreibung erlautert . 

GemaS Figur 12B werden historische Daten per Projektion in 
das Gesichtsfeld eingeblendet . Dabei ermittelt das System 
aus dem erfaSten Gesichtf eldlicht eine geeignete 
Einblendestelle , beispielsweise vor einem eintonigen Dach 
oder vor dem Himmel . Entsprechend der Einblendstelle werden 
die Daten eingeblendet. Typischerweise wird die Fovea 
centralis vorerst nicht auf die Einblendstelle gerichtet 
sein, weshalb die eingeblendeten Daten vorerst als 
unscharfe periphere Erscheinung wahrgenommen werden. Erst 
durch eine. eritsprechende Schwenkung der Blickrichtung gemaS 
Figur i2C werden die ortsfest eingeblendeten Daten auf die 
Fovea centralis abgebildet. Wird der Blick auf ein anderes 
vom System erkanntes Gebaude gerichtet, so konnen sich die 
eingeblendeten Information gemaS den Figuren 12D und 12E 
andern. In den Figuren stellt der Kreis 12 90 das 
wahrgenommene Gesichtsfeld dar, wahrend der Kreis 1291 den 
von der Fovea centralis erfaSten Bereich des Gesichtsf eldes 
kennzeichnet . 

Durch eine wie in der Figur 1 dargestellte , kompakte und 
tragbare Bauweise konnte ein solches Orientierungssystem 
von einem FuSganger, einem Radfahrer, einem Motorradf ahrer 
oder einem sonstigen Fahrzeugf ahrer getragen werden. 

Figur 13 

GemaS einem in den Figuren 13A und 13B dargestellten, 
zwolften Ausfuhrungsbeispiel fungiert das erf indungsgemaSe 
Inf ormationssystem als Fahrhilfe. Die Figuren zeigen das 
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wahrgenommene Gesichtsfeld 13 90 eines Benutzers eines 
solchen Systems. 

Bevorzugt umf a£t die Inf ormationsvorrichtung des 
Informations systems einen Abstandssensor , beispielsweise 
einen optischen oder akustischen AbstandsmeSgerat oder eine 
Radarvorrichtung, oder ist an ein entsprechendes 
abstandmeSendes System angeschlossen, das den Abstand 
zwischen einem Fahrzeug und sich in Fahrtrichtung vor dem 
Fahrzeug befindlichen Gegenstanden ermittelt. Bei einer 
stereoskopischen Erfassung von Licht aus dem Gesichtsfeld 
konnte der Abstand mittels einer Paralaxeberechnung 
ermittelt werden, bei der die Anderung der Position des 
Gegenstands in einem jeweilig links und rechts erfaEten 
Bild Auskunft uber den Abstand vermittelt. 

Wird • zum Beispiel uber eine ebenfalls von der 
Inf ormationsvorrichtung umf afite "Auswertevorrichtung 

f estgestellt , da.S> das Fahrzeug sich auf Kollisionskur.se mit 
dem Gegenstand befindet, so kann beispielsweise ein 
Warnzeichen 13 95 in den Bereich des scharfsten Sehens 13 91 
und ein Warnkreis 13 94 urn den gefahrlichen Gegenstand 
mittels einer wie zuvor beschriebenen Projektion 
eingeblendet werden. Befindet sich der Gegenstand auSerhalb 
oder am Rande des Bereichs des peripheren Sehens, so kann 
ein weiteres Warnzeichen 13 95a darauf hinweisen, wo der 
Gefahr sich birgt . Dies ist in der Figur 13A dargestellt. 

Uber Sensoren oder dem erf aSten Gesichtsf eldlicht lassen 
sich auch andere der Fahrsicherheit relevanten 
Inf ormationen ermitteln. Zum Beispiel konnte eine 
Auswertevorrichtung die Fahrbahnmarkierungen einer 
innerhalb des Gesichtsf eldes liegenden Fahrbahn per 
Mustererkennung erkennen und daraus die hochstmogliche 
Geschwindigkeit , insbesondere bei Kurven, berechnen. Stellt 
das Inf ormationssystem selbststandig oder durch Anbindung 
an das Ins trumentensys tern eines Fahrzeug fest, daS das 
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Fahrzeug diese errechnete Hochstgeschwindigkeit 

uberschritten hat, so kann ein Wamzeichen 13 95 in den 
Bereich des scharfsten Sehens 13 91 eingeblendet werden. 
Dies ist in der Figiir 13B dargestellt. Der Vorteil einer 
Einblendung des Warnzeichens 13 95 im Bereich des scharfsten 
Sehens 13 91 liegt darin, daS das Zeichen 13 95 dort 
erscheint, wo das Auge hinschaut, und leitet dem Auge 
deshalb nicht dazu, von der vorliegenden Szene 
wegzuschauen. Aus diesem Grunde soil die Helligkeit 
eingeblendeter Zeichen so gewahlt werden, daS die Zeichen 
transluzent erscheinen. Auf die Gefahr kann auch akustisch 
hingewiesen werden. 



15 



20 



Figur 14 

Die Figuren 14A und 14B zeigen ein erf indungsgemaSes 
Informations system gemaS einem dreizehnten 

Ausfiihrungsbeispiel, das die Moglichkeiten eines komplexen, 
vielseitigen Informationsystem verdeutlicht . Im konkret 
dargestellten Beispiel weist das dargestellte 

Informationsystem eine mobile Feuerwehrleitzentrale 1410, 
die einen Kommandopult 1412 umfaSt, sowie mehrere 
Helmsysteme 1411 auf. 



-J 



25 Jedes der Helmsysteme 1411 umfaEt eine wie zuvor 
beschriebene Signalerf assungsvorrichtung sowie eine 
Gesichtsf elderf assungsvorrichtung . Wahlweise kann jedes der 
Helmsysteme 1411 mit einer Pro j ektionsvorrichtung, 
Inf rarotsensoren und/oder Lagesensoren ausgestattet werden. 

3 0 Sie kormen auch mit weiteren Sensoren ausgestattet werden, 
die beispielsweise eine Bestimmung der Luf tqualitat 
ermoglichen . Zu Kommunikationszwecken ist jeder der Helme 
1411 beispielsweise mit einem Funkubertragungssystem 
ausgestattet, das mit der Leitzentrale 1410 bzw. dem 

35 Kommandopult 1412 kommuniziert, und- das durch sein Senden 
und Empfangen von Informationen sowohl Aufgaben einer 
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Inf ormationsvorrichtung als 
Ausgabevorrichtung ubernimmt . 



auch 



Auf gaben 



einer 



ml 



Bevorzugt werden die von den jeweiligen Helmen 1411 
5 erfaSten Gesichtsf eldbilder , die auf der Basis der aus den 
Augen erfaSten Signale mit dem tatsachlich wahrgenommenen 
Gesichtsfeld des jeweiligen Feuerwehrmanns in 

Ubereinstimmung gebracht werden konnen, an den Kommandopult 
1412 iibertragen und dort auf Monitore dargestellt. Zwecks 
10 einer Reduktion der zu ubertragenden Datenmengen konnten 
Bediener des Kommandopult s 1412 ebenfalls ein 
proj izierendes Brillensystem tragen, damit lediglich die 
auf den Bereich der Fovea centralis des Bedieners fallenden 
Bilddaten in hoher Auflosung iibertragen bzw. erfaSt werden 
15 miissen. In das Auge des Bedieners konnte ein korreliertes 
Gesichtsf eldbild eines einzelnen Feuerwehrmanns , oder ein 
Mosaik mehrerer Bilder hineinproj iziert werden. Dabei 
konnte der Bediener genau das sehen, was der Feuerwehrmarm 
sieht, oder ein" sich in Abhangigkeit von seinen- eigenen 
2 0 Augenbewegungen veranderndes Bild aus dem Blickfeld des 
Feuerwehrmanns zur Verfiigung gestellt bekommen. 



Bei einer etwaigen Projektionen konnte dem Bediener 
^ j und/oder dem Feuerwehrmarm zusatzliches Information in das 

2 5 projizierte Bild hineingef lochten werden. Beispielsweise 

konnte durch die Lagesensoren bzw. Inf rarotsensoren 
gewonnene Orient ierungs- bzw. Temperaturinf ormationen in 
das Gesichtsfeld hineingeblendet werden. Die stetige 
Einblendung bestimmter Himmelsrichtungen, wie Nord und 

3 0 West, sowie von hohen Angaben ware sowohl dem dem gesehenen 

Geschehen entfernten Bediener als auch dem durch Rauch und 
Qualm verschleierten Feuerwehrmarm eine hilfreiche 
Bezugsangabe . 



3 5 Durch eine ent sprechende Aufbereitung der erfafiten 
Lageinf ormationen konnte aufgrund der inharenten Vernetzung 
der Systemkomponenten jedem Feuerwehrmarm die Position 
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seiner Kollegen, beispielsweise mit einem kennzeichnendem 
"X", oder die Lage und Schwere der gesichteten oder auf 
sonstige Art erfaSten Feuerherde, beispielsweise mit einem 
der Feuerstarke entsprechend f arbig gekennzeichneten Punkt 
eingeblendet werden. Dies wurde die Feuerbekampf ung 
erleichtern und die Wahrscheinlichkeit eines 

versehentlichen Verletztens eines hiriter Rauch oder einer 
Wande unsichtbaren Kollegen verringern. 

Figur 15 

Die Figur 15 zeigt ein erf indungsgemaSes Inf ormationssys tern 
gemafi einem vierzehnten Ausf utirungsbeispiel , bei dem das 
Inf ormationsystem dem Bedienen eines externes System, 
beispielsweise eines zur Bewegung von gefahrlichen 
Gegenstanden ausgelegten, f erngesteuerten Roboters 1570, 
dient . 

GemaS der Abbildung umfaSt der auf Rader beweglicher Robot 
1570 eine Kammeravorrichtung 1571 sowie einen Greifarm 
1572. Der Roboter 1570 ist beispielsweise uber eine 
Funkverbindung mit einem von einem Benutzer 1502 getragenen 
Brillensystem 1520 verbunden. Die uber die 

Kameravorrichtung 1571 mono- oder stereoskopisch erfaSten 
Bilder liefien sich mit einer vom Brillensystem 1520 
umfaSten Pro j ektionsvorrichtung mono- bzw. stereoskopisch 
auf die Netzhaut des Benutzers 1502 projizieren. Bei einer 
stereoskopischen Projektion ware ein raumliches Sehen 
gewahrleistet . 

Verfugt die Kameravorrichtung 1571 uber eine makroskopische 
Objektiv, die ein breiteres "Gesichtsf eld" aufweist, als 
das Gesichtsf eld des Benutzers 1502, so kann das vom 
Benutzer 1502 gesehene Gesichtsfeld durch eine 
entsprechende Auswahl eines Bildausschnitts aus dem von der 
Kameravorrichtung 1571 gelieferten Bild, wie zuvor 
beschrieben, in Abhangigkeit von den erfaSten Augenbewegen 
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des Benutzers 1502 mit dem fernen Bild in Korrelation 
gehalten werden. Ansonsten lieSe sich die Kameravorrichtung 
15 71 in Korrelation mit den Augenbewegungen schwenken. Es 
konnen auch uberLagesensoren die Bewegungen des Kbpfes des" 
5 Benutzers 15 02 derart erfaSt werden, daS die 
Kameravorrichtung 1571 in Korrelation mit den 
Kopf bewegungen mitschwenkt. Das erf indungsgemaSe 

Inf ormationssystem bietet somit ein bisher unerreichtes MaS 
an visueller Echtheit bei der Wahrnehmung einer entfernten 
10 Szene, was die Steuerung eines solchen externen Systems 
1570 erheblich erleichtert . 

Durch das Anbringen einer Mikrofon, insbesondere einer in 
Abhangigkeit der Kopfposition oder der Blickrichtung 
15 ausgerichteten Richtmikrof on, an das externe System in 
Verbindung mit einer Kopf horeranordnung am Brillensystem 
laSt sich eine weitere sensorische Dimension realisieren. 

Urn eine weitere Bedienuhg des Roboters 15 7 0 zu ermoglichen, 
20 ist ein manuell bedienbarer Steuerknuppel 1525 
beispielsweise iiber ein Kabel 1526 mit dem Brillensystem 
1520 verbunden. Hierdurch lieSe sich zum Beispiel den 
Greifarm 1572 oder die Fahrtrichtung des Roboters 1570 in 
^ | mehrere Richtungen steuern. 

25 

Figur 16 

Die Figur 16 stellt ein erf indungsgemaSes 

Inf ormationssystem gemafi einem fiinfzehnten 

3 0 Ausfuhrungsbeispiel schematisch dar, bei dem ein 
Brillensystem 1620 als universelle Fernbedienung fur ein 
oder mehrere Gerate fungiert, zum Beispiel ein Computer 
1675, ein Videorekorder 1676, einen Drucker 1677, einen 
Diaprojektor 1678 und/oder ein Telefon 1679. 

35 

Im dargestellten System stellt das Brillensystem 1620 eine 
in zwei Richtungen iibertragende Schnittstelle zwischen 
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Bill 



einem Benutzer 1602 und dem zu bedienenden .Gerat 1675-1679. 
Zuerst muS das Gerat 1675-1679 erkannt werden. Dies erfolgt 
im Sinne der Erfindung grundsatzlich iiber ein Anvisieren 
des zu bedienenden Gerats 1675-1679 mit der Fovea 
5 centralis. Die Identitat des anvisierten Gerats 1675-1679 
laSt sich entweder mit oder ohne die Mithilfe des Gerats 
1675-1679 bestimmen. Im folgenden wird davon ausgegangen, 
daS sowohl das Gerat 1675-1679 als auch die Brille 1620 mit 
den fur die beschriebenen Vorgange notwendigen 
10 Signalempf angs- bzw. -sendevorrichtung ausgestattet werden. 



J 



Wird die Identitat mit der Mithilfe des Gerats 1675-1679 
bestimmt, so strahlt dieses Gerat 1675-1679 entweder in 
mehr oder minder regelmaSigen Intervallen ein Kennsignal 
15 aus, beispielsweise ein Infrarot- oder Ultraschallsignal , 
oder es wird von einer von der Brille 1620 ausgestrahlten 
Auf forderungssignal aufgefordet, ein Kennsignal 

auszustrahlen. Das Auf forderungssignal muE lokalisiert in 
'Richtung Blickrichtung ausgestrahlt "werden, urn ein 
2 0 Ansprechen anderer Gerate zu vermeiden. Das vom Gerat- 1675- 
1679 ausgestrahlte Kennsignal wird von der Brille erkannt, 
woraus auf die Identitat des Gerates geschlossen wird. 



p Wird die Identitat ohne die Mithilfe des Gerats 1675-1679 
25 bestimmt, so nimmt die Brille 1620. in Zusammenarbeit mit 
einer Datenbank oder sonstige Inf ormationsquelle 1640, die 
Mustererkennungsdaten fur die jeweilig ansprechbaren Gerate 
1675-167 9 enthalt, eine Mustererkennung des anvisierten 
Bereichs des Gesichtsf elds vor. 

30 

Anhand der Identitat des Gerats 167 5-167 9 wird ein der 
moglichen Funktionen des Gerats angepaStes Menu in das 
Gesichtsf eld des Benutzers 1602 ggf . auf Tastendruck oder 
Augenzwinkern ortsfest eingeblendet . 1st die Funktionalitat 
3 5 der Brille nicht ohne weiteres bekannt, so werden zuerst 
die entsprechenden Inf ormat ionen aus einer Datenbank oder 
einer sonstigen Inf ormationsquelle 1640, beispielsweise 
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durch standardisierte Abfrage des Gerats selbst, in 
Kermtnis gebracht . Hier kann eine in das Abf ragesignal 
eingebettete Identif izierung des Gerats dafiir sorgen, dafi 
lediglich das gewiinscht Gerat auf die Abfrage antwortet. 
5 Dadurch, daS das Menu ortsfest in das Gesichtsfeld 
eingeblendet wird, kann der Benutzer 1602 das ggf. 
hierarchische Menu durch geringf iigige Augenbewegungen wie 
ein Computermenu bedienen. 

10 Nachdem die gewiinscht Funktion ausgewahlt worden ist, wird 
'\> ein der Funktion entsprechendes Signal von der Brille 1620 




an das Gerat 1675-1679 gesandt . Hier kann eine in das 



Signal eingebettete Identif izierung des Gerats dafur 
sorgen, dafi lediglich das gewiinscht Gerat auf das Signal 
15 reagiert . 

Auf diese Art und Weise konnte mit geringer Hardwareauf wand 
eine schnelle und einfache Bedienung vieler Gerate erzielt 
'werden. 
20 . . 

Figur 17 

Die Figuren 17 zeigt ein optisches System gemaS einem 




sechzehnten Ausf iihnxngsbeispiel , bei dem ein Kippspiegel 
1755 ein Umschalten zwischen einer Aufnahme aus dem 



Gesichtsfeld und einer Aufnahme aus dem Auge 1780 oder 
einer Projektion auf die Netzhaut 1781 ermoglicht. 

Der Vorteil dieses optischen Systems liegt darin, daS die 
3 0 gleichen Taumelspiegel 1754H und 1754V fur eine Aufnahme 
aus dem Gesichtsfeld und fiir eine Projektion auf die 
Netzhaut 1781 verwendet werden kann, und daS der 
Strahlengang fiir eine Aufnahme aus dem Gesichtsfeld und der 
Strahlengang fiir eine Aufnahme aus dem Auge 1780 bzw. eine 
3 5 Projektion auf die Netzhaut 1781 dementsprechend zum 
GroSteil identisch sind. So wird schon durch das optische 
System eine hohe Korrelation zwischen dem aus dem 
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Gesichtsf eld erf aSte Licht und den . aus dem Auge erf aSten 
Signale bzw. eine hohe Korrelation zwischen dem aus dem 
Gesichtsfeld erfaSte Licht und dem auf die Netzhaut 
projizierte Bild erzielt. Das heiSt, es werden keine 
5 zusatzliche Korrelationsf ehler dadurch versucht, dafi die 
besprochenen Strahlengange uber verschiedene Taumelspiegel 
verlauf en, die unterschiedliche Rotationscharakteristika 
aufweisen konnten. Fur Lichterf assung aus dem Gesichtsfeld 
und Lichterf assung aus dem Auge kann sogar die gleiche 
10 Lichterf assungvorrichtung 1751 verwendet werden. Lediglich 
durch die Reflektion am Brillenglas 1724 und das optische 
System des Auges 17 8 0 kann die Korrelation negativ 
beeinf luSt werden . 

15 Nicht-dargestellte Ausf uhrungsbeispiele 

Erganzend zu den in den Figuren darges tell ten 
Ausf uhrungsbeispielen werden nachstehend weitere. moglichen 
Ausf uhrungsf ormen eines . Inf ormationssystems beschrieben, 

2 0 das mit dem erf indungsgemaSen interaktiven Datensicht- und 
Bediensystem kombiniert werden kann. 

TV / Zeitung 

F)25 Bisherige elektronische Biicher bzw. Zeitungen haben den 
Nachteil, zu schwer und/oder zu unhandlich zu sein, und 
konnen auSerdem nur eine begrentze Inf ormationsmenge pro 
Seite darstellen. Auch tragbare Video- und Fernsehgerate 
sind schwer und/oder unhandlich. Wird das erf indungsgemaSe 

3 0 Inf ormationssystem derart ausgebildet, daE das 

Zuverf iigungstellen von Informationen eine Projektion von 
Bildinf ormationen in das Auge umf aSt , so lassen sich 
verschiedene visuell bezogene Medien, beispielsweise 
elektronische Biicher oder Zeitungen, Fernsehen oder 
3 5 Videospiele, durch das Inf ormationssystem verwirklichen. 
Dabei wird das erf indungsgemafie Inf ormationssystem zum 
Beispiel, wie oben beschreiben, in Form einer tragbaren 
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Brille realiziert, die iiber eine Kabel-, Infrarot- ocier 
Funkverbindung beispielsweise an ein Inf ormationsnetz , eine 
tragbare Speichervorrichtung, zum Beispiel ein CD-ROM- oder 
DVD-Lesegerat , oder eine sonstige Inf ormationsguelle " 
angeschlossen werden kann. 

Ein Vorteil einer derartigen Ausbildung des 
erf indungsgemaEen Inf ormat ions sys terns liegt darin, daS 
seine Erfassung von Signalen aus dem Auge in Zusammenhang 
mit seiner Gesichtsf elderf assung eine Projektion 
ermoglicht, bei dem der projizierte Text bzw. die 
projizierte Bilder im Raum fixiert zu sein scheint. Zu 
diesem Zweck umfaSt die Inf ormat ionsvorr ichtung eine 
Auswertevorr ichtung , die die Korrelation der Sehachse zum 
Blickfeld ermittelt, und die die Projektion entsprechend 
steuert, so dafi die auf das Auge projizierten Inf ormationen 
vis-a-vis dem Blickfeld trotz Bewegungen des Auges 
unbeweglich zu . sein scheinen. Die Ermittlung . der 
Korrelation der Sehachse zur Umgebung kann auch durch in 
der Brille angebrachte Lagesensoren- unterstutzt werden. 

Der virtuelle Ort der Fixierung kann beispielsweise iiber 
eine Fixierung mit den Augen in Zusammenhang mit einem 
Augenzwinkern oder Tastendruck oder auch automatisch, zum 
Beispiel mittels einer bildverarbeitenden Auswertung des 
Blickfelds, die ein moglichst inhaltsarmes Gebiet des 
Blickfelds ermittelt, festgelegt werden. Die storende 
Wirkxang des durch die Projektion der Inf ormationen nicht 
notwendigerweise abgedeckten, natiir lichen Gesichtsf eldes 
liefie sich durch ein f arbkomplementares "Auswischen" 
verringern, bei dem komplementarf arbige Bildpunkte anhand 
des aus dem Gesichtsfeld erfaSten Lichts ermittelt werden, 
deren korrelierte Projektion auf die jeweilig zugeordnete 
Gebiete der Netzhaut den naturlichen Hintergrund durch 
Farbaddition als wei£ erscheinen laSt . 1st ein schwarzer 
Hintergrund erwunscht, so mu&, wie zuvor beschrieben, die 
empfundene Gesamthelligkeit der Projektion die empfundene 
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Gesamthelligkeit des natiirlichen Gesichtsf eldes urn ca. 10% 
bis 2Q% uberschreiten, damit auch die hellsten Punkte des 
natiirlichen Gesichtsf eldes als schwarz empfunden werden. 

Zu Bedienungszwecken konnten Bildinf ormationen, die 
virtuelle Bedienungsknopf e darstellen, derart in das Auge 
hineinprojiziert werden, daS sie in der Nahe des Textes 
bzw. Bildes im Gesichtsf eld ebenso fixiert erscheinen. 
Somit lieSe sich das virtuelle Inf ormationsmedium mittels 
Anvisieren des entsprechenden Bedienungsknopf es mit der 
Fovea centralis plus Tastendruck oder Augenzwinkern 
f ernbedienen, d.h. Umblattern, Vorspulen, Zuriickspulen, 
o.a. Ahnlich konnte ein Zugriff auf Lexika, Datenbanken, 
u.s.w. durch das Anvisieren von dargestellten Wortern oder 
Bildteile ermoglicht werden. Anstatt Bedienungsknopf e lieEe 
sich das Inf ormat ions sys t em beispielsweise auch iiber eine 
Menufiihrung bedienen, bei der Bedienmenus bei der 
Betrachtung bestimmter Bildbereich "auf springen" , .urn ein 
augengesteuertes Auswahlen aus dem ggf . hierarchisch 
aufgebauten Menu zu ermogiichen. 

Ein weiterer Vorteil einer derart igen Ausbildung des 
erf indungsgemafien Inf ormat ionssystems liegt darin, daS die 
fur eine ausreichende momentane Darstellung notwendige 
Datenmenge bei weitem geringer ist, als die Datenmenge, die 
fur hochauf losende Darstellung des gesamten Gesichtsf eldes 
notwendig ware. Dies liegt der Tatsache zugrunde, daS das 
Inf oirmat ions sys tern den Bereich des scharfsten Sehens kennt. 
Somit mussen nur diejenigen Teile der Projektion mit hoher 
Auflosung erfolgen, die den Bereich der Fovea centralis 
betreffen. Auf sonstige Gebiete der Netzhaut geniigt eine 
Projektion mit geringer Bildpunktdichte . Dementsprechend 
reduziert sich die fur eine momentane Darstellung 
notwendige Datenmenge, was deutliche Systemvorteile mit 
sich bringt . Insbsondere . laSt sich die empfundene Grofie des 
projizierten Bildes beliebig wahlen, ohne daS unbearbeitbar 
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groSe Datenmengen zur Presentation des momentanen Bildes 
die Folge sind. 

1st das projizierte Bild groSer als das Gesichtsfeld, dann 
bestimmt die momentane Sehachse den Bildausschnitt . Die 
Projektion erfolgt derart, daS der aktuelle Bildausschnitt 
den gesamten aktiven Bereich der Netzhaut fiillt. Durch 
Augeribewegung konnen weitere Ausschnitte des Bildes in das 
Gesichtsfeld hineingebracht werden. 1st das projizierte 
Bild kleiner als das Gesichtsfeld, so muS lediglich auf 
einen beschrankten Teil der Netzhaut projiziert werden. 
Wird der natiirliche Gesichtf eldhintergrund nicht 
ausgeblendet , so andert sich dieser bei Augenbewegungen . 
Insbesondere bei femseh- oder kinoartigen 

Inf ormationsdarstellungen ist eine das Gesichtsfeld genau 
fullende Projektion bevorzugt . 

Werden Signale aus beiden Augen eines Benutzers erfaSt, so 
kann die Projektion stereoskopisch erfolgen, wobei jedem 
Auge ein derart geringf iigig . unterschiedliches Bild 
zugespeist wird, daS das Gehirn ein dreidimensionales 
Gesamtbild wahrzunehmen glaubt. Somit liefie sich eine 
optimale System-Mensch-Schnittstelle beispielsweise fiir 3D- 
Fernsehen, 3D-Videospiele , 3D- CAD - Anwendungen oder 

sonstige, insbesondere interaktive, 3D -Anwendungen 

verwirklichen. Bevorzugt umfaEt das Inf ormationssystem 
weitere Bedienelemente, zum. Beispiel ein Steuerknuppel , 
Pedal oder Lenkrad, die eine Navigation bzw. 
Perspektivwechsel innerhalb des dargestellten virtuellen 
Bildes oder eine sonstige Beeinf liissung der 
Inf ormationsdarbietung oder eines mit der 

Inf ormationssystem verbunden Systems ermoglicht. Wie zuvor 
beschrieben, kann auch das Auge selbst als Bedienelement 
fungieren. 

Unter entsprechender Anwendung der vorstehend fur die 
Positionierung einer elektronischen Zeitung an einem 
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virtuellen Ort erf orderlichen MaSnahmen ist es 
gleichermafien moglich, dem Trager des erf indungsgemaEen 
Inf ormationssystems andere Orientierungshilf en auf die 
Netzhaut zu spielen, wie z.B. einen kunstlichen Horizont. 

5 

Ophthamologische Anwendungen / Sehhilfen 



Aufgrund ihrer Erfassung aus dem Auge zuriickref lektierter 
Signale eignet sich das erf indungsgemafie System 
10 hervorragend zur Ausgestaltung als ophthamologisches 
System. Zum Beispiel laSt sich das Inf ormationssystem als 
Positioniersystem fur die ophthamologische Chirugie, 
insbesondere fur die ophthamologische Laserchirugie, 
realisieren. Auch als ophthamologisches Diagnosesystem, 
15 Sehhilf esystem und/oder Sehf ehlerkorrektursystem findet das 
Inf ormationssystem beispielsweise Anwendung. 

Die meisten Strukturen oder Organe des \ Auges sind im 
Vergleich zu manuellen. Bewegungen sehr klein. Erkrankungen 
2 0 und Beschadigungen dieser Strukturen bzw. Organe betreffen 
haufig nur einen kleinen, mikroskopischen Bereich. . Im 
Gegensatz zu vielen anderen Korperpartien lassen sich die 
Augen jedoch nicht fixieren, was die Behandlung evtl. 

^ Erkrankungen oder Verletzungen des Auges besondere 

7 ^ 2 5 erschweren. 



Aufgrund der Fahigkeit des erf inderungsgemaSen Systems, 
Bewegungen des Auges genau verfolgen und . Inf ormationen 
beziiglich der augenblicklichen Stellung des Auge auch 

3 0 anderen Systemen zur Verfugung stellen zu konnen, lassen 
sich diese Schwierigkeiten durch ein therapeutisches System 
auf der Basis des erf inderungsgemaEen Inf ormationssystems 
uberwinden. Zum Beispiel kann das therapierende System 
derart mit dem erf indungsgemafien Inf ormationssystem zwecks 

3 5 Inf ormationsaustausch verbunden sein, daS Inf ormationen 
bezuglich der augenblicklichen Stellung des Auge dem 
therapierenden System zur Verfiigung gestellt werden, so daS 
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eine punktgenaue automatisierte. Therapie des Auges auch bei 
bewegten Augen erfolgen kann. 




to 



GemaS einem anderen Ausf uhrungsbeispiel wird ein 
5 therapierender Laserstrahl uber das optische System des 
erf indungsgemaSen Inf ormationssystem gelenkt. Eine 
Laserbehandlung des Auges, insbesondere der Netzhaut, kann 
somit auf gleiche Art wie eine wie zuvor beschriebene 
Projektion erfolgen. Beispielsweise konnen krankhafte Adern 
10 der Aderhaut dadurch verodet werden, daS ■ ein 
photoempf indliches Mittel eingespritzt oder eingenommen 
wird, und daS krankhafte Stellen der Aderhaut uber mehreren 
Zehn Sekunden punktgenau bestrahlt werden. Eine derartige 
. Therapie laSt sich mit Hilfe der erf indungsgemaSen 
15 Inf ormationssystem prazis ausfuhren. 

Urn als Sehhilfe- und/oder Sehf ehlerkorrektursystem 
Anwendung zu. finden, umfaSt die Ausgabevorrichtung des 
Inf ormationssystems eine Proj ektionvorrichtung, die 

2 0 sichtverbessernde Bildinf ormationen auf die Netzhaut 

projiziert. Zudem wird die Inf ormationsvorrichtung eine 
Auswertevorrichtung umfassen, die die sichtverbessernde 
Bildinf ormationen anhand des aus dem Gesichtsfeld erfaSten 
Lichts ermittelt. Die sichtverbessernden Bildinf ormationen 

.A; 

JZls 2 5 werden bevorzugt derart in Korrelation mit den aus dem Auge 
erfaSten Signalen auf die Retina projiziert, daS das 
natiirlich wahrgenommene Gesichtsfeld und die projizierten 
Bildinf ormationen als einheitliches Bild wahrgenommen 
werden. Im Extremfall werden die sichtverbessernden 

3 0 Bildinf ormationen derart auf die Retina projiziert, daS das 

ansonsten natiirlich wahrgenommene Gesichtsfeld vom Auge gar 
nicht wahrgenommen wird. Wie zuvor beschrieben, kann der 
Grad der Wahrnehmung eines so projizierten Bildes im 
Verhaltnis zum natiirlich wahrgenommenen Bild durch die 
35 Helligkeit der projizierten Bildpunkte gesteuert werden. 
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Durch ein derartiges Inf ormationssystem laSt sich 
beispielsweise eine Sehf ehlerkorrektur fur Kurz- oder 
Weitsichtige sowie bei Farbsehschwache durchfuhren. Bei der 
Korrektur einer Kurz- bzw. Weitsichtigkeit kann das 
5 Inf ormationssystem auf eine (quasi- ) festen Korrektur 
eingestellt werden, eine veranderbare Korrektur 
ermoglichen, oder sich dynamisch auf den Sehfehler 
automatisch einstellen. Die Korrektur erfolgt liber ein ggf . 
einstellbares optisches Fokussiersystem innerhalb der 
10 Projektionsvorrichtung oder durch bildverarbeitende 
MaEnahmen. Letzteres laSt sich mit geringem Systemauf wand 
realisieren. 

Implementierungen mit (quasi- ) fester oder veranderbarer 
15 Korrektur sind durch . ihre inharente Ahnlichkeit zu 
ahnlichen optischen Systemen fur den Fachmann ohne weitere 
Erklarung verstandlich. Eine Realisierung mit einer 
dynamischen, automatischen Korrektur deis naturlichen 
Abbilduhgsf ehlers umfaEt neben der oben ' beschriebenen 

2 0 Korrelat-ion eine weitere Abhangigkeit zu den vom Auge 

erfaSten Signalen. Insbesondere wird dabei ein 
Netzhautref lexbild erfafit, das durch Vergleich mit dem aus 
dem Gesichtsfeld erfaSten Licht und/oder durch eine 
bildverarbeitende Auswertung Auskunft uber die Scharfe des 
25 auf der Netzhaut abgebildete Bild liefert. Entsprechend 
wird das aus dem Gesichtsfeld erfaSte Licht in 
sichtverbessernde Bildinf ormationen auf bearbeitet und auf 
die Retina projiziert. Durch Ausgabe des so ermittelten 
Korrekturwertes kann das Informationssystem als 

3 0 Diagnosesystem fungieren. 

Durch seine Erfassung aus dem Auge zuruckref lektierter 
Signale und aus dem Gesichtsfeld stammenden Lichtes ist das 
erf indungsgemaSe Informationssystem mittels einer 

3 5 entsprechend programmierten Auswertevorrichtung in der 
Lage, Auskunft uber viele ophthamologisch relevanten 
Eigenschaf ten des Auge zu geben. Zum Beispiel lassen sich 
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Schielwinkel, Primar-Positionen (pp) / 

Gesichtsf eldbestimmungen auch mit Farben, Schwellwerttests , 
standardisierte Testverf ahren fur Glaukomadiagnose, 
Priifungen von Netzhautf unktionen (beispielsweise ERG und 
5 VEP) auch an ausgewalten Orten und Priifungen der rezeptiven 
Felder durchfuhren bzw. bestimmen. Die hierzu zu erfassende 
Signale aus dem Auge, die hierzu notwendigen 
Gesichtsf eldreize und die hierzu notwendigen 

Bearbeitungsalgorithmen wahlt der Fachmann auf der Basis 
10 seiner Fachkenntnis und unter Berucksichtigung der 
vorstehend beschriebenen Erfindung entsprechend aus. 

Wahrend beispielsweise die Sehscharfe sich durch eine 
Auswertung aus dem Auge zuriickref lektierter Signale 
15 feststellen und anschlieSend korrigieren laSt, setzt die 
Korrektur manch anderer Sehfehler eine systemunabhangige 
Feststellung des Fehlers, zum Beispiel durch einen 
Augenarzt; voraus. Eine passende Einstellung der durch das 
Inf o.rmat ions system vorgenommenen Korrektur kann rekursiv 

2 0 oder einfach durchgefiihrt werden. 

Bei einem rekursiven Einstellvorgang wird eine Korrektur 
gemaS vorheriger Einstellung vom Inf ormationssys tern 
vorgenommen wahrend das Sehvermogen der f ehlsichtigen 
25 Person getestet wird. Anhand der Ergebnisse der Tests wird 
eine neue Einstellung des Inf ormationssystems gewahlt. 
Dieser Vorgang wird wiederholt durchgefiihrt, bis der 
Sehfehler ausreichend kompensiert worden ist. In diesem 
Sinne fungiert das Inf ormationssystem gleichwohl als 

3 0 Diagnosesystem; denn anhand der bestkorrigierenden 

Ende ins tel lung kann der Sehfehler bestimmt werden. 

Bei einem einfachen Einstellvorgang wird das Sehvermogen 
der f ehlsichtigen Person ohne jeglicher Kompensation 
35 getestet. Anhand der Ergebnisse der Tests wird eine 
passende Einstellung des Inf ormationssystems gewahlt, das 
im spateren Einsatz das aus dem Gesichtsfeld erfaSte Licht 
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dann gemaS dieser Einstellung in sichtverbessernde 
Bildinf ormationen auf bearbeitet und auf die Retina 
projiziert. Bei der Aufbereitung werden, der Einstellung, 
d.h. dem urspriinglichen Sehfehler,- entsprechend, 
5 beispielsweise bestimmte Spektralkomponenten oder bestimmte 
Bereiche des Gesichtsf eldes hervorgehoben oder durch 
sonstige bildverarbeitenden MaSnahmen verandert . 

Fur Nachtblinde kann zum Beispiel eine Sehhilfe durch das 
10 erf indungsgemaSe Inf ormat ions system dadurch verwirklicht 
werden, daS das aus dem Gesichtsf eld, beispielsweise durch 
j stark lichtempf indliche Photodetektoren, erfaSte Licht 

stark verstarkt auf die Retina projiziert wird. Dabei 
konnen die Zapfen derart angeregt werden, date ein 
15 iiberwiegend farbiges, photopisches Sehen statt ein 
skotopisches Sehen stattfindet. Es wird auch die maximal 
erlaubte Helligkeit der einzelnen projizierten Bildpunkte 
auf einen vorgegebeneri Schwellwert beschrankt, urn ein 
Blenden durch hell leuchtende Gegenstande wie 

2 0 StraSenlaternen und entgegenkommenden Autos zu vermeideii. 

Ein solches System eignet sich also auch als Anti-Blend- 
System. Derm wird die Helligkeit des gesamten Gesichtsf elds 
gehoben, wahrend die "iibermaSige" Helligkeit einzelner 
Punkte unverandert bleibt, so werden die "ubermaSig" helle 
25 Punkte nicht mehr als "ubermaSig" hell empfunden. UmfaSt 
die Inf ormationsvorrichtung auch einen Inf rarotsensor , der 
Inf rarotlicht aus dem Gesichtsf eld erfaSt, so lassen sich 
zusatzliche einfarbige Bildinf ormationen bezuglich des 
Gesichtsf elds bei Nacht oder Nebel gewinnen, die in den 

3 0 sichtbaren Spektralbereich transf ormiert werden konnen, urn 

die schon mittels der Gesichtf elderf assungsvorrichtung und 
der Auswertevorrichtung gewonnen Bildinf ormationen 
auf zuwer'ten. 

3 5 Auch im Allgemeinen kann das erf indungsgemaEe 
Inf ormationssystem dazu geeignet sein, die Sehfahigkeit zu 
verbessern. Beispielsweise bei starken oder schwachen 
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Kontrasten oder bei geringer Helligkeit im Gesichtsfeld 
konnen in ihrer Helligkeit angepafite Bildinf ormationen in 
das Auge projiziert werden, um eine verbesserte 
Sehfahigkeit zu ermoglichen. 

5 

Helme 

Die Integration des erf indungsgemaSen interaktiven 
Datensicht- und Bediensys terns mit und ohne das vorstehend 
10 beschribene Informationssystem in einem Feuerwehrmannhelm 
wurde oben erlautert . Ahnliche Ausgestaltungen, 
beispielsweise als Soldaten- , Fahrer- , Kranfahrer-, 
Sportier- oder Pilotenhelm oder -brille sind ebenfalls 
denkbar . 

15 

Ein Soldatenhelm bzw. -brille auf der Basis des 
erf indungsgemaSen Informationssystem konnte dem Soldaten 
zum Beispiel bei der. Orientierung und/oder bei der 
Zielsuche behilflich sein. In einem solchen Fall umfaSt die 

2 0 Inf ormatiohsvorrichtung des Informationssystem bevorzugt 

Sensoren und/oder Funkempf anger , eine ubersinnliche 
Wahrnehmung der Umgebung und/oder das Empfangen von 
Inf ormationen von einer Kommandozentrale ermoglichen. Die 
Ausgabevorrichtung wird Inf ormationen bevorzugt visuelle , 
25 horbar oder taktil, zum Beispiel in Form kurzer 
elektrischer Reizstrome an der Haut, zur Verfugung stellen. 
Letzteres konnte dazu verwendet werden, einen Soldaten 
unmittelbar uber die Richtung eines von hinten zubewegenden 
Fremdobjekts zu informieren. 

30 

Als Nachtsichtgerat wiirde das Informationssystem neben der 
Erfassung von sichtbarem Licht aus dem Gesichtsfeld auch 
Inf rarotlicht aus dem Gesichtsfeld erfassen. Wie zuvor 
beschrieben, konnen Bildinf ormationen aus solch erfafitem 

3 5 Inf rarotlicht gewonnen und bei der Aufwertung von in das 

Auge zu proj izierenden Bildinf ormationen eingesetzt werden. 
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Weist die Informationsvorrichtung beispielsweise einen GSP- 
Empf anger auf, so konnte der Helm Positions inf ormationen 
Oder Orientierungshilfen auf die Netzhaut projizieren. 
Bevorzugt erfolgt die Projektion solcher Inf ormationen ins 
5 Auge ahnlich der Projektion einer elektronischen Zeitung. 
Das heiSt, es wird eine Ablenkung des Soldaten dadurch 
. vermieden, daS das Bild der Inf ormationen im Raum oder vis- 
a-vis einer neutralen Stellung des Auges fixiert zu sein 
scheint . Auch eine Anpassung der Bildinf ormationen an den 
10 dahinter wahrgenommenen Hintergrund zwecks einer moglichst 
guten Lesbarkeit findet durch eine zur 

Informationsvorrichtung gehorende Aus wer t evorr ichtung 



15 Auch wenn eine Funk- oder sonstige Datenubertragung vom 
Soldaten aus an eine Kommandozentrale aus strategischen 
Tarnungsgrunden generell zu vermeiden gilt, konnte in 
bestimmten Fallen auch eine Ubertragung von mit den- 
Augenbewegungen des Soldaten korreliert£ Gesichtf elddaten 

20 an eine Kommandozentrale sirmvoll sein. 

In einer fur Soldaten besonders interessanten 
Aus fuhrungs form kann die mit dem interaktiven Datensicht- 
und Bediensystem kombinierbare Informationsvorrichtung eine 

25 oder mehrere Kameras aufweisen, die Bilder von auSerhalb 
des Gesichtsf eldes erfassen. Die so gewonnenen 
Bildinf ormationen werden dann uber eine 

Projektionsvorrichtung auf die Retina projiziert. Das auf 
das Gesichtsf eldbild projizierte Zusatzbild konnte zum 

30 Beispiel als Bild im Bild als kleines Bild in die Ecke des 
naturlichen oder projizierten Gesichtsf eldbildes projiziert 
werden oder als Langstreif en am unteren Rand erscheinen. 
Dabei dient die Erf as sung von Signalen aus dem Auge 
zusammen mit der Gesichtsf elderfassung dazu, die 

3 5 proj izierten Bilder in Korrelation mit den Bewegungen des 
Auges zu halten. 



statt . 
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25 
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35 



Beim Kranfahrer ware es ebenfalls hilfreich, Zusatzbilder 
aus anderen Perspektiven in das Gesichtsfeld 
hineinzuproj izieren. Gleichfalls konnte das 

erf indungsgemafie - Inf orma t ions sy s tern Zusatzsensoren 
umfassen, mit deren Hilfe Entfernungs- oder 

Gewichtsinformationen ermittelt werden, urn in das 
Gesichtsfeld hineinpro j iziert zu werden. Solche 
Inf orma tionen konnen beispielsweise auch beim Anblick der 
Last in Kombination mit einem Tastenklick horbar oder 
visuell zur Verfugung gestellt werden. Dabei dient das aus 
dem Gesichtsfeld ermittelte Licht als Grundlage der 
Bilderkennung wahrend die Signale aus dem Auge wie zuvor 
beschrieben eine Korrelation des erfaSten Gesichtsf elds zur 
S eha chs e e rmog 1 i chen . 

Einem Pi lot en konnte das erf indungsgemafie 

Inf ormationssyscem viele verschiedenen Informationen zur 
Verfugung stellen. Durch eine Anbindung an das 
Informationssystem des Flugzeugs kpnnten zum Beispiel 
relevante Daten wie Flughohe, Geschwindigkeit oder 
Flugrichtung oder auch ein kunstlicher Horizont in das 
Gesichtsfeld des Piloten wie beschrieben eingeblendet 
werden. Beim Anflug konnten zudem Landehilf einf ormationen 
eingeblendet werden, die einen virtuellen Landekorridor 
darstellen, oder Hohen- oder Richtungskorrekturwerte 
ahgeben. Bei militarischer Anwendung konnen dem Pilot 
Freund/Feind- und Zielhilf einf ormationen zur Verfugung 
gestellt werden. Hier spielt die Blickrichtung des Piloten 
sowohl bei der raumlichen Einblendung der Informationen als 
auch bei der Inf ormationsauswahl eine Rolle. Der Pilot 
mochte, daS ein Flugkorper, den er mit den Augen anvisiert, 
identifizert wird. Falls die Idenif izierung visuell 
erfolgt, mochte er, daS die Einblendung keine relevanten 
Bereiche seines Gesichtsf eldes uberdecken. Dabei sind die 
gegenlaufige Anf orderungen zu berucksichtigen, daS die 
relevanten Bereiche des Gesichtsf eldes typischerweise auf 
der Fovea centralis abgebildet werden, aber auch, daS nur 
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10 

15 



20 



30 



diejenigen Bilder, die auf die Fovea centralis projiziert 
werden, scharf abgebildet werden. Es muS also eine 
intelligente Einblendung erfolgen, bei der die relevanten 
Bereiche des Gesichtsf elds zum Beispiel liber eine 
Bilderkennung und nicht lediglich liber die Ausrichtung der 
Fovea centralis erkennt werden. In diesem Zusammenhang kann 
das erf indungsgemaSe Inf ormat ions sys t em auch als 
Untersystem zum Inf ormat ions system des Flugzeugs fungieren 
und diesem Inf ormat ionenen zur Verfiigung stellen. So 
konnten beispielsweise Inf ormationen daruber, wo der Pilot 
hinschaut, vom erf indungsgemaSen Inf ormationssystem an das 
Flugzeuginf ormationssystem geliefert werden und dort zur 
Zielerf assung beitragen. Im Ernstfall konnte das 
Inf ormat ionsys tern feindliche Radarstellung uber Sensoren 
orten und ihre Position mit dem dazugehorigen Gelande 
dreidimensional darstellen. 

Sportlern konnten. durch das erf indungsgemaSe 

irif ormationssystem wie in den vorhergehenden Beispielen 
verschiedene Inf ormationen zur Verfiigung gestellt werden. 
Mittels einer Projektion von Inf ormationen in das Auge 
konnten beispielsweise Orientierungshilf en, 

Geschwindigkeits information und/oder auf gewertete 

Gesichtf eldinf ormationen, die eine bessere Sicht bei 
Dammerung, Nacht, Regengischt oder Nebel ermoglichen, zur 
Verfiigung gestellt werden. Insbesondere bei gehaltsarmen 
Inf ormationen eignet sich ein nicht visuelles 
Zurverfiigungstellen der Inf ormationen. Ahnlich den 
vorhergehenden Beispielen kann ein von einem Sportier 
getragenes erf indungsgemafies Inf ormationssystem als 
Untersystem eines Sportgerates oder eines Fahrzeuges 
fungieren. 

Reine Inf ormat ionssysteme 

Eine libers innliche Wahrnehmung laSt sich durch 
Ausf iihrungsf ormen des Inf ormationsystems erzielen, bei den 



Seite - 72 - 



(File:ANM\P0451 2B1.doc] Beschreibung, 29.01.01 
2nd Sight mit Retina Scan 

PHYSOPTICS Opto-Electronic GmbH 

die Inf ormationsvorrichtung einen oder mehrere Sensoren 
beispielsweise Magnet f elddetektoren, Drucksensoren, 

Thermometer, Spektralsensoren, optische oder akustische 
Interf erenzmefigerate umfaSt. Insbesondere durch . eine 
Uberlagerung einer in das Auge proj izierten, bildlichen 
Darstellung der aus den Sensoren gewonnenen Inf ormationen 
auf das naturliche Gesichtsfeld entspricht die Darstellung 
den Bedurfnissen eines sehenden Menschen. Dabei kann das 
erf indungsgemaSe Inf ormationssystem als Bestandteil, 
insbesondere als Prasentationseinrichtung, einer komplexen 
Mefieinrichtung auftreten. 

Als Beispiel eines solchen Systems gilt ein mit 
empf indlichen Magnetsensoren ausgestattetes Brillensystem, 
das in der Lage ist, stromf uhrende oder metallische 
Gegenstande in Relation zur Brille zu orten. Werden solche 
georteten Gegenstande mittels einer wie zuvor beschriebenen 
Projektion ortsgetreu im natiirlichen Gesichtsfeld farbig 
gekennzeichnet , so lieSen sich beispielsweise linter Putz 
verlaufende Wasser- oder Stromleitungen sehr leicht 
auffinden. Ein ein solches Brillensystem tragender Monteur 
wurde den Verlauf der Leitungen sozusagen "an der Wand 
gepinselt 11 sehen . 

Wird ein zwei- oder dreidimensionales Array oder sonstige 
ein- oder mehrdimensionale Verteilung der Sensoren gewahlt, 
so konnen auch beispielsweise sehr komplexe Vektorfelder 
oder Gradientenverlaufe einem Betrachter bildlich uber den 
dazugehorigen Gegenstand oder Anordnung sichtbar gemacht 
werden. Zum Beispiel konnte eine Anordnung von 
Drucksensoren urn ein Testobjekt in einem Windtunnel herum 
Druckinf ormationen liefern, die durch das erf indungsgemaSe 
Informationsystem wie zuvor beschrieben derart aufbereitet 
und in die Augen eines Betrachters, der das Testobjekt 
durch ein Fenster beobachtet, projiziert, daS er die durch 
das Testobjekt entstehenden Druckgradienten anhand 
entsprechender farbiger Kennzeichnung der Druckwerte dort 
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sieht, wo sie vorhanden sind. Einem Schweifier konnten 
mittels einer Infrarotkamera gewonnenen 

Temperaturinf ormationen derart in sein Gesichtsfeld 
dargestellt werden, daE die ortliche Oberf lachentemperatur 
5 entlang den bearbeiteten Gegenstande erkenntlich. ist. 




Ahnlich konnen Spektralsensoren dazu verwendet werden, 
einem Remit zer Auskunft . uber genaue Farbwerte oder 
Materialzusammensetzungen zu geben. Hier bietet es sich 

10 auch an, die ermittelten Inf ormationen, in Abhangigkeit 
davon, wo der Benutzer genau hinschaut, horbar zu 
prasentieren. In Zusammenarbeit mit einer Datenbank und 
einer Mustererkennung konnte ein solches System zum 
Beispiel dazu verwendet werden, Pilze oder Pf lanzen 

15 zumindest annahernd zu identif izieren, indem der Benutzer 
bestimmte Teile des Pilzes bzw. der Pflanze auf 
Systemauf f orderung anschaut bzw. den Sensoren zuwendet . 



20 



Zusairanenf as sung 



Im folgenden werden anhand von Merkmalsgruppen die 
wesentlichen Punkte nochmals zusammengef asst , die fur das 
erf indungsgemaSe interaktive Datensicht- und Bediensystem 
jeweils fur sich und in Kombination miteinander und mit 
25 Informationssystemen verschiednster Ausgestaltung von 
besonderer Bedeutung sind: 

Interaktives Datensicht- und Bediensystem, mit 

einer in der Art einer Brille von einer Bedienperson 
30 tragbaren optischen Vorrichtung (), mit der die Netzhaut () 
scanbar und ein auf das Auge () einfallendes Bild, 
insbesondere ein Netzhautref lexbild aufnehmbar ist, 

einer Signalverarbeitungseinrichtung (), mit der die 
von der optischen Vorrichtung () erfassten Signale 
35 auswertbar sind und ein ent sprechendes Ausgangssignal an 
eine Kommunikationsschnitt stelle () ubertragbar ist, 



Seite - 74 - 



[Fite:ANM\P0451 2B1 .doc] Beschreibung, 29.01 .01 
2nd Sight mit Retina Scan 
PHYSOPTICS Opto-Electronic GmbH 



10 



15 



eine Datenubertragungseinrichtung () , mit der in 
Abhangigkeit vom Ausgangssignal und ggf. zusatzlicher 
Steuerbef ehle der Bedienperson Daten von einer externen 
■ Informationsquelle, wie z.B. einer Datenbank abrufbar sind, 
und 

einer Steuervorrichtung (), mit der auf der Basis der 
abgerufenen Daten und ggf. in Abhangigkeit zusatzlicher 
Steuerbef ehle der Bedienperson die 

Signal verarbeitungseinrichtung iiber die 

Kommunikationsschnittstelle () ansteuerbar ist, urn entweder 
die optische Vorrichtung () zur Einspielung zusatzlicher 
Bildinf ormation auf die Netzhaut und/oder zumindest ein 
weiteres Inf ormationswiedergabegerat , wie z.B. ein 
Kopf horersystem zur Ubertragung von zusatzlicher 
Information zur Bedienperson zu veranlassen. 



20 



2. System nach Punkt 1, gekennzeichnet durch eine mobiles 
Kommunikationssystem .zwischen Datensicht- und Bediensystem 
und externer Inf r.omationsquelle . 

3. System nach Punkt 2, dadurch gekennzeichnet, das.s die 
Datenubertragungseinrichtung ein Mobiltelefon () aufweist. 



4.. System nach Punkt 2 Oder 3, dadurch gekennzeichnet, 
25 dass die Datenubertragungseinrichtung einen Computer 
aufweist, der mit einer geeigneten DFU-Schnittstelle 
ausgestattet ist. 



5. System nach einem der Punkte 1 bis 4, dadurch 
30 • gekennzeichnet, dass die zusatzlichen Steuerbef ehle der 

Bedienperson auf optischen Inf romationssignalen basieren, 
die von der optischen Vorrichtung abgegeben werden. 

6. System nach einem der Punkte 1. bis 4, dadurch 
35 gekennzeichnet, dass die zusatzlichen Steuerbef ehle der 

Bedienperson auf akustischen Inf romationssignalen basieren, 
die von einer Spracheingabeeinheit () abgegeben werden. 
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7. System nach einem der Punkte 1 bis 4, dadurch 
gekennzeichnet, dass die zusatzlichen Steuerbef ehle der 
Bedieriperson "auf Ihf romatibnssignalen " basieren, "die von 
einer elektromechanischen Steuereinheit , wie z.B. einer 
Bedienmaus () abgegeben werden. 



10 



15 



20 



25 



30 



35 



8. System nach einem der Punkte 1 bis 7, dadurch 
gekennzeichnet , dass die von der optischen Vorrichtung () 
erfasste Struktur der Netzhaut in Form eines Datensatzes () 
in der Signalverarbeitungseinrichtung zwischengespeichert 
ist, wobei der Datensatz zur Tragerkennung bzw. zur 
personalisierten Einstellung des Systems an die betreffende 
Bedienperson herangezogen wird. 

9. System nach einem der Punkte 1 bis 8, gekennzeichnet 
durch die Verwendung im medizinischen Bereich, insbesondere 
im Bereich der .Ophthalmologies als Therapie- pder- 
AnalysegerSt . 



bis 



als 



10. System nach einem der Punkte 1 
Inf ormationssystem mit 

einer Signalerf assungsvorrichtung, die von einem eine 
Netzhaut aufweisenden Auge zuriickref lektierte Signale 
erf afit ; 

eine Gesichtsf elderf as sungs vorrichtung, die sichtbares 
Licht aus einem der Netzhaut zugeordneten Gesichtsf eld 
erfa£t, ohne ein Netzhautref lexbild der Netzhaut zu 
erf assen; 

eine Inf ormat ionsvorr ichtung ; und 

einer Ausgabevorr ichtung, die Inf ormat ionen in 
Zusammenarbeit mit der Inf ormat ions vorrichtung, in 
Abhangigkeit vom erfafiten Licht und in Korrelation mit den 
erfaSten Signalen zur Verfugung stellt. 

11. System als Informationssystem nach Punkt 10, wobei 
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10 



die Inf ormationsvorrichturig eine Auswertevorrichtung 
umfaSt, die Bildinf ormationen bezuglich des Gesichtsf eldes 
aus dem erfaSten Licht gewinnt; und 

die Aus gabevorricht urig eine Pro jekt ions vorrichtung 
umfaSt, die die Bildinf ormation auf die Netzhaut derart in 
Korrelation mit den erfaSten Signalen projiziert, daS ein 
natiirlich wahrgenommenes Gesichtsf eld und die projizierten 
Bildinf ormationen von der Netzhaut als einheitliches Bild 
wahrgenommen werden. 



12. System als Inf ormationssystem nach einem der 
vorhergehenden Punkte, wobei die besagte Abhangigkeit eine 
zeitliche oder raumliche Korrelation zwischen dem 
Zurverf ugungstellen der Inf ormationen und dem erfaSten 
15 Licht umfaSt. . . 



13. System als Inf ormationssystem nach einem der 
vorhergehenden Punkte, wobei die besagte Abhangigkeit eine 
mindestens einen Inf orma-tionsschlussel lief ernde 

2 0 Musterkennung umfaSt, und die Inf ormat ions schliissel einer 

durch die Inf ormationsvorrichturig gestutzten 

Inf ormationsabf rage dienen. 

.14. System als Inf ormationssystem nach einem der 

25 vorhergehenden Punkte, wobei die 

Signalerf assungsvorrichtung eine scannende Vorrichtung 
umfaSt, die in einem ersten Scanvorgang eine mindestens 
partielle Erfassung des Netzhautref lexbildes aufnimmt und 
in einem spateren Scanvorgang eine weniger umfangreiche 

3 0 Erfassung des Netzhautref lexbildes vornimmt . 

15. System als Inf ormationssystem nach einem der Punkte 10 
bis 14, wobei die Signalerf assungsvorrichtung das 
Netzhautref lexbild nur teilweise oder gar nicht erf aSt . 

35 

16. System als Inf ormationssystem nach einem der 
vorhergehenden Punkte, wobei die 
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Gesichtsf elder f assungsvorrichtung eine spharisch oder 
spharisch wirkende Ref lektionsschicht aufweist, die ein 
Teil des auf das Auge gerichteten Lichts in eine 
Sensorvorrichtung zur Erfassung ablenkt . 



17 . System als Informationssystem nach einem der 
vorhergehenden Punkte, wobei die 
Gesichtsf elderf assungsvorrichtung und/oder die 
Signalerf assungsvorrichtung das Hornhautref lexbild des 

10 Auges mindestens teilweise erfaSt. 

18. System als Informationssystem nach einem der 
vorhergehenden Punkte, wobei die 
Signalerfassungsvorrichtung und die 

15 Gesichtsf elderf assungsvorrichtung als tragbare Einheit 
ausgefiihrt sind. 



2 0 



19. System als Informationssystem nach eihem der 

vorhergehenden Punkte, wobei die Ausgabevorrichtung die 
Inf ormationen taktil, visuell, horbar, riechbar und/oder 
geschmacklich zur Verfugung stellt. 



20. System als Informationssystem nach einem der 
vorhergehenden Punkte, wobei die Inf ormationsvorrichtung 

25 eine Datenbank, eine Sensorik, eine 

Inf ormationsnetzanbindung und/oder eine Auswertevorrichtung 
aufweist . 

21. System als Informationssystem nach einem der 
3 0 vorhergehenden Punkte, wobei das Informationssystem in 

tragbarer Form ausgefiihrt wird. 



35 



22. Verfahren zum Zurverf iigungstellen von Inf ormationen 
mit den Schritten: 

Erfassung von Signalen, die von einem eine Netzhaut 
aufweisenden Auge zuruckref lektiert worden sind; 
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Erfassung von sichtbarem Licht aus einem der Netzhaut 

zugeordneten Gesichtsf eld, ohne ein Netzhautref lexbild der 
Netzhaut zu erfassen; und 

Zurverfugungstellen der Inf ormationen in 

5 Zusammenarbeit mit einer Inf ormat ions vorrichtung, in 

Abhangigkeit vom erfafiten Licht und in Korrelation mit den 
erfaEten Signalen. 



23. Verfahren nach Punkt 22, mit den Schritten: 

10 - Gewinnung von Bildinf ormationen bezuglich des 
Gesichtsf eldes aus dem erfafiten Licht; und 

' Projektion der Bildinf ormation auf die Netzhaut derart 
in Korrelation mit den erfafiten Signalen, dafi das naturlich 
wahrgenommene Gesichtsf eld und die projizierten 
15 Bildinf ormationen von der Netzhaut als einheitliches Bild 
wahrgenommen werden. 

24. ..Verfahren nach Punkt 22 oder 23, _wobei die besagte 
Abhangigkeit . eine zeitliche oder raumliche Korrelation 

20 zwischen dem Zurverfugungstellen der Inf ormationen und dem 
erfafiten Licht umf afit . 



25. Verfahren nach einem der Punkte 22 bis 24, wobei die 
besagte Abhangigkeit eine mindestens einen 

^^25 Inf ormationsschliissel liefernde Musterkennung umf afit, und 
die Inf ormationsschliissel einer durch die 

Inf ormat ionsvorrichtung gestiitzten Inf ormat ionsabf rage 
dienen. 



30 26. Verfahren nach einem der Punkte 22 bis 25, wobei die 
Signalerf assung Scanvorgange umf afit, wobei in einem ersten 
Scanvorgang eine mindestens partielle Erfassung des 
Netzhautref lexbildes erfolgt und in einem spateren 
Scanvorgang eine weniger umfangreiche Erfassung des 

3 5 Netzhautref lexbildes vorgenommen wird. 
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27. Verfahren nach einem der Punkte 22 bis 25, wobei die 
Signalerfassung das Netzhautref lexbild nur teilweise oder 
gar nicht erf afit . 



10 



28. Verfahren nach einem der Punkte 22 bis 27, wobei die 
Erf as sung von sichtbarem Licht iiber eine spharisch oder 
spharisch wirkende Ref lektionsschicht erfolgt, die ein Teil 
des auf das Auge gerichteten Lichts . in eine 
Sensorvorrichtung zur Erfassung ablenkt . 



29. Verfahren nach einem der Punkte 22 bis 28, wobei die 
Erfassung von sichtbarem Licht und/oder die Signalerfassung 
eine mindestens partielle Erfassung des 
Hornhautref lexbildes des Auges umf aSt . 

15 

30. Verfahren nach einem der Punkte 22 bis 29, wobei das 
Zurverfiigungstellen der Inf ormationen taktil, visuell, 
horbar, riechbar- und/oder geschmacklich zur - Verfugung 
stellt . 

20 

31 . Verfahren nach einem der Punkte 22 bis 30 , wobei die 
Inf ormationsvorrichtung eine Datenbank, eine Sensorik, eine 
Inf ormationsnetzanbindung und/oder eine Auswertevorrichtung 

p ist. 

32. Verfahren zur Uberspielung von optischer Information 
auf die menschliche Netzhaut unter Verwendung eines 
vorzugsweise seriell arbeitenden, ein auf die Netzhaut 
einfallendes Bild aufnehmenden Scansystems und eines 

3 0 Inf ormat ions -Pro jektionssys terns, wobei der Abtast- und 
Proj ektionsstrahl ein vorbestimmtes Bewegungsmuster 
aufweist und wobei die Information vorzugsweise von den 
Signalen des Scanystems abhangt, dadurch gekennzeichnet , 
da£ der Pro j ekt ions vorgang bei laufendem Abtastvorgang 
35 erfolgt. 
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33. Verfahren nach Punkt 32, bei dem nach einem partiellen 
Abtasten des Bildes ein partieller Pro j ekt ions vorgang 
ablauft. 



5 34. Vorichtung zur Durchfiihrung des Verfahrens nach Punkt 
32 oder 33, mit einem vorzugsweise seriell arbeitenden 
Scansystems, mit dem ein auf die Netzhaut einfallendes Bild 
aufnehmbar ist, und mit einem Informations - 

Projektionssystem, wobei der Abtast- und Proj ektionsstrahl 
10 mittels einer Steuereinrichtung entsprechend einem 
vorbestimmten Bewegungsmuster steuerbar ist, gekennzeichnet 




durch eine Einrichtung, die den Proj ekt ions vorgang bei 



laufendem Abrastvorgang erlaubt . 

15 35. Vorrichtung zur Uberspielung von optischer Information 
auf die menschliche Netzhaut unter Verwendung eines seriell 
arbeitenden Scan- und Pro j ektionssystems mit vorbestimmtem 
Bewegungsmuster des Abtast- und Proj ektionsstrahls , bei der 
der Strahl (846) des projizierten Lichts dem Strahl (843) 

20 des aufgenommenen Lichts nacheilt . 

36. Vorrichtung nach Punkt 35, bei der der minimale 
zeitliche Versatz zwischen Aufnahme und Projektion eines 
Bildpunkts im wesentlichen der Verarbeitungszeit des zuvor 

25 aufgenommenen Bildsignals entspricht. 

37. Vorrichtung nach Punkt 35 oder 36, bei der das Scan- 
und das Pro j ektionssystem einen gemeinsamen oder 
unterschiedlichen Strahlengang haben. 

30 

38. Vorrichtung nach Punkt 37 zur Uberspielung von 
optischer Information auf die menschliche Netzhaut unter 
Verwendung eines seriell arbeitenden Scan- und 
Proj ektionssystems mit vorbestimmtem Bewegungsmuster des 

3 5 Abtast- und Pro j ektionsstrahls , dadurch gekennzeichnet, da£ 
die Bewegungsmuster (1502a, 1502b) des Abtast- und des 
Proj ektionsstrahls zueinander versetzt sind. 
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20 



30 



39. Vorrichtung nach Punkt 30, bei der die Bewegungsmuster 
des Abtast- und des Projektionsstrahls zueinander urn einen 
vorbestimmten kleinen Winkel versetzt sind. 

40. Vorrichtung nach Punkt 38, bei der die Bewegungsmuster 
des Abtast- und des Projektionsstrahls zueinander um einen 
vorbestimmten kleinen Abstand (11VA) radial versetzt sind. 

41. Vorrichtung nach einem der vorangehenden Punkte, bei 
der das Scan- und das Abtastsystem getrennte Strahlengange 
haben . 

42. Vorrichtung nach einem der vorangehenden Punkte, bei 
der das Scansystem das auf die Netzhaut einfallende Bild an 
einer der Netzhaut vorgeschalteten S telle (929) des 
optischen Systems abtastet. 

43. Vorrichtung nach einem. der vorangehenden Punkte, bei 
der das Bewegungsmuster des Abtast- und Projektionsstrahls 
einer Spirale entspricht. 

44. Vorrichtung nach einem der vorangehenden Punkte, bei 
der das Bewegungsmuster des Abtast- und Projektionsstrahls 
einem Kreis- oder Ellipsenscan entspricht. 

45. Vorrichtung nach einem der vorangehenden Punkte, unter 
Verwendung einer konstanten Abtastgeschwindigkeit , oder 
einer konstanten Winkelgeschwindigkeit des Abtast- und 
Projektionsstrahls, oder einer an die Dichte der Rezeptoren 
im menschlichen Auge angepassten Geschwindigkeit , so dass 
die pro Zeiteinheit von den Pro j ektionsstrahlen 
uberstrichenen Rezeptoren im wesentlichen konstant ist. 

46. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur Analyse 
des Sehvermogens eines Patienten, indem mittels der 
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Projektionseinheit auf der Netzhaut bzw. auf ausgewahlten 
Bereichen der Netzhaut ein vorbes t immtes Muster bzw. eine 
vorbestimmte Musterverteilurig genexiert wird. 

47. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur Analyse 
der Bewegungsmuster und/oder der Rauschf elder und/oder des 
raumlichen Sehvermogens eines Auges eines Patienten, indem 
fur Prufzwecke mittels der Projektionseinheit auf der 
Netzhaut Random -Dot -Muster generiert werden. 

48. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur Bestimmung 
von Anomalien der Augapf el-Motorik, indem in das System 
eine Einrichtung zur Bestimmung und Uberwachung der Lage 
und/oder Orientierung des Augapf els integriert ist. 

.4 9. Verwendung und/oder Ausbildung zur Bestimmung des 
Schielwinkels , indem eine Einrichtung zur Bestimmung und 
Uberwachung des Augenmittelpunkts beider Augen integriert 
ist . 

50. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur Auf deckling 
von parasysympathischen/sympathischen Efferenzen, indem die 
Pupillomotorik mittels einer Detektoreinrichtung uberwacht 
und ausgewertet wird. 

51. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte als 
Synoptophor Oder Synoptometer ohne Apparatekonvergenz . 

52. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte als 
Einrichtung zur Bestimmung der Zyklodeviation . 
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53 . Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte als 
Phasendif f erenzhaploskop . 

54. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach. einem der vorstehenden Punkte als 
Einrichtung zur sichtachsenidentischen Detektion von 
Phorien bei unterschiedlichen Blickrichtungen. 

55. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur 
Funktionsprufung der Netzhaut, unter Heranziehung eines 
Muster-Elektro-Retinogramms (ERG) und einer 
Korrellationseinrichtung, mit der ein auf die Netzhaut 
gespieltes Bild in Korrellation mit dem tatsachlich 
ermittelten ERG bringbar ist. 

56. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur Messung. 
der Kontrast-Empf indlichkeit des Sehvermogens eines 
Patienten vorzugsweise in Abhangigkeit von der 
Ortsf requenz . 

57. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur 
Rauschf eldampimetrie . 

58. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte zur Bestimmung 
der Ausdehnung und der Lage zentraler Gesichtsf elddef ekte 
(Skotome) . 

59. Verwendung und/oder Ausbildung der Systeme und/oder 
Verfahren nach einem der vorstehenden Punkte als VEP 
(Visual Enabling for Precision Surgery) -Gerat. 
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60. Verwendung und/oder Ausbildung der Systeme 
und/oder Verfahren nach einem der vorstehenden Punkte als 
SLO (Scanning Laser Ophthalmoloskop) -Gerat . 




Seite - 85 - 



[File:ANM\P0451 2A1.doc] Anspruche, 29.01.01 
2nd Sight mit Retina Scan 
PHYSOPTICS Opto-Electronic GmbH 



Anspruche 

1. Interaktives" Datensicht- und Bediensystem, mit 

5 einer in der Art einer Brille von einer Bedienperson 

tragbaren optischen Vorrichtung (150), mit der die Jjetzhaut 
(281) scanbar und ein auf das Auge (280) einfallendes Bild, 
insbesondere ein Net zhautref lexbild aufnehmbar ist, 

einer Signalverarbeitungseinrichtung (140), mit der 
10 die von der optischen Vorrichtung (150) erfassten Signale 
auswertbar sind und ein entsprechendes Ausgangssignal an 
y j eine Kommunikationsschnittstelle (196) ubertragbar ist> 

eine Datenubertragungseinrichtung (140, 196, 197), mit 
der in Abhangigkeit vom Ausgangssignal und ggf. zusatz- 
15 licher Steuerbef ehle (101b) der Bedienperson Daten von 
einer externen Inf ormationsquelle (198), wie z.B. einer 
Datenbank abrufbar sind, und 

einer -Steuervorrichtung (196), mit der auf der Basis"- 
- der abgerufenen Daten und ggf. in Abhangigkeit zusatzlicher 
20 Steuerbef ehle (101b) der Bedienperson die Signalverarbei- 
tungseinrichtung (140) uber die Kommunikationsschnittstelle 
(196) ansteuerbar ist, urn entweder die optische Vorrichtung 
(150) zur Einspielung zusatzlicher Bildinf ormation auf die 
y Netzhaut (281) und/oder zumindest ein weiteres Informa- 

y 25 tionswiedergabegerat (150a), wie z.B. ein Kopf horersystem 
zur Obertragung von zusatzlicher Information (101a) zur 
Bedienperson zu veranlassen. 

2. System nach Anspruch 1, gekennzeichnet durch eine 
30 mobiles Kommunikationssystem (197; E) zwischen Datensicht- 

und Bediensystem und externer Inf romationsquelle (198). 

3. System nach Anspruch 2, dadurch gekennzeichnet , dass 
die Datenubertragungseinrichtung ein Mobiltelef on (197) 

35 aufweist. 
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4. System nach Anspruch 2 oder 3, dadurch gekennzeichnet, 
dass die Datenubertragungseinrichtung einen Computer auf- 
weist, der mit einer geeigneten DFU-Schnittstelle ausge- 
stattet ist . 

5 

5. System nach einem der Anspruche 1 bis 4, dadurch ge- 
kennzeichnet, dass die zusatzlichen Steuerbef ehle (101) der 
Bedienperson auf optischen Ihf romationssignalen basieren, 
die von der optischen Vorrichtung (150) abgegeben werden. 

10 

6. System nach einem der Anspruche 1 bis 4, dadurch ge- 
kennzeichnet, dass die zusatzlichen Steuerbef ehle der 
Bedienperson auf akustischen Inf romationssignalen (101b) 
basieren, die von einer Spracheingabeeinheit (150b) abgege- 

15 ben werden . 

7. System nach einem der Anspruche 1 bis 4, dadurch ge- 
kennzeichnet , dass die zusatzlichen Steuerbef ehle der 
Bedienperson auf - Ihf romationssignalen basieren, die- von 

20 einer elektromechanischen Steuereinheit , wie z.B. einer 
Bedienmaus abgegeben werden.. 

8. System, nach einem der Anspruche 1 .bis 7, dadurch gekenn- 
zeichnet, dass die von der optischen Vorrichtung (150) 

25 erfasste Struktur der Netzhaut (281) in Form eines Daten- 
satzes in .der Signalverarbeitungseinrichtung (140) 
zwischengespeichert ist, wobei der Datensatz zur Tragerken- 
nung bzw. zur personalisierten Einstellung des Systems an 
die betreffende Bedienperson herangezogen wird. 

30 

9. System nach einem der Anspruche 1 bis 8, gekennzeichnet 
durch die Verwendung im medizinischen Bereich, insbesondere 
im Bereich der Ophthalmologie, als Therapie- oder Analyse- 
gerat. 

35 

10. System als Inf ormat ionssystem nach einem der Anspruche 
1 bis 9, gekennzeichnet durch 
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eine Signalerf assungsvorrichtung, die von minclestens 
einem eine Netzhaut aufweisenden Auge zuruckref lektierte 
Signale erf aft t; eine Gesichtsf elder f assungsvorrichtung, 

die sichtbares Licht aus einem der Netzhaut zugeordneten 
5 Gesichtsf eld erf afit , ohne ein Net zhautref lexbild der Netz- 
haut zu erfassen; 

eine Inf ormationsvorrichtung; und 

eine Ausgabevorrichtung, die Inf ormationen in Zusam- 
menarbeit mit der Inf ormationsvorrichtung, in Abhangigkeit 
10 vom erfafiten Licht und in Korrelation mit den erfafiten 
Signalen zur Verftigung stellt. 

11. System nach Anspruch 10, wobei 

die Inf ormationsvorrichtung eine Auswertevorrichtung 
15 umfafit, die Bildinf ormationen bezuglich des Gesichtsf eldes 
aus dem erfaftten Licht gewinnt; und 

die Ausgabevorrichtung eine Pro j ektionsvorrichtung 
urn fa-fit/ die die Bildinf ormat ion auf die Netzhaut derart in 
Korrelation mit den erf afiten Signalen projiziert, dafi ein 
20 nat-urlich wahrgenommenes Gesichtsf eld und die pro'j izierten 
Bildinf ormationen von der Netzhaut als einheitliches Bild 
wahrgenommen werden . 

12. System nach Anspruch 10 Oder 11, wobei die besagte 
25 Abhangigkeit eine zeitliche oder raumliche Korrelation 

zwischen dem Zurverf ugungstellen der Inf ormationen und dem 
erf afiten Licht umfafit. 

13. System nach einem der Anspriiche 10 bis 12, wobei die 
30 besagte Abhangigkeit eine mindestens einen Informations- 

schlussel liefernde Musterkennung umfalit, und die Informa- 
tionsschlussel einer durch die Inf ormat ions vorrichtung 
gestiit zten Inf ormat ionsabf rage dienen . 

35 14. System nach einem der vorhergehenden Anspriiche , wobei 
die Signalerf assungsvorrichtung eine scannende Vorrichtung 
umfafit, die in einem ersten Scanvorgang eine mindestens 
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partielle Erfassung des Netzhautref lexbildes aufnimmt und 
in einem spateren Scanvorgang eine weniger umfangreiche 
Erfassung des Net zhautref lexbildes vorniirant. 




5 15. System nach einem der Anspriiche 10 bis 14, wobei die 
Signaler f assungsvorrichtung das Net zhautref lexbi Id nur 
teilweise oder gar nicht erfaftt. 

16. System nach einem der Anspriiche 10 bis 14, wobei die 
10 Gesichtsf elderf assungsvorrichtung eine spharisch oder 
spharisch wirkende Ref lektionsschicht aufweist, die ein 
Teil des auf das Auge gerichteten Lichts in eine Sensorvor- 
richtung zur Erfassung ablenkt. 

15 17. System nach einem der Anspruche 10 bis 16, wobei die 
Gesichtsf elderf assungsvorrichtung und/ oder die Signaler f as- 
sungsvorrichtung das Hornhautref lexbild des Auges minde- 
stens .teilweise erfalit. 

20 18. System nach einem der Anspruche 10 bis 17, wobei die 
Signalerf assungsvorrichtung und die Gesichtsf elderf assungs- 
vorrichtung als tragbare Einheit ausgefuhrt sind. 

19. System nach einem der Anspruche 10 bis 18, wobei die. 
25 Ausgabevorrichtung die Inf ormationen taktil, visuell, 

horbar , riechbar und/oder geschmacklich zur Verf iigung 
stellt . 

20. System nach einem der Anspruche 10 bis 19, wobei die 
30 Inf ormationsvorrichtung eine Datenbank, eine Sensorik, eine 

Inf ormationsnetzanbindung und/oder eine Auswertevorr ich- 
tung . 
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Zusammenfassung 

Beschrieben wird ein interaktives Datensicht- und Be- 
5 diensystem, miteiner in der Art einer Brille von einer 
Bedienperson tragbaren optischen Vorrichtung (150) , mit der 
die Netzhaut (281) scanbar und ein auf das Auge (280) 
einfallendes Bild, insbesondere ein Net zhautref lexbild 
aufnehmbar ist. Es ist eine Signalverarbeitungseinrichtung 

10 (140) vorgesehen, mit der die von der optischen Vorrichtung 
(150) erfassten Signale auswertbar sind und ein entspre- 
chendes Ausgangssignal an eine Kommunikationsschnittstelle 
(196) ubertragbar ist. Ferner ist eine Datenubertragungs- 
einrichtung (140, 196, 197) vorhanden, mit der in Abhangig- 

15 keit vom Ausgangssignal und ggf . zusatzlicher Steuerbef ehle 
der Bedienperson Daten von einer externen Informations- 
quelle, wie z.B. einer Datenbank abrufbar sind. Schliefilich 
ist eine Steueryorrichtung (196) vorgesehen, mit. der auf. 
der Basis der abge'rufenen Daten und ggf. in Abhangigk'eit 

20 zusatzlicher Steuerbef ehle der Bedienperson die Signalver- 
arbeitungseinrichtung liber die Kommunikationsschnittstelle 
(196) ansteuerbar ist, urn entweder die optische Vorrichtung 
(150) zur Einspielung zusatzlicher Bildinf ormation auf die 
Netzhaut und/oder zumindest ein weiteres Informations- 

25 wiedergabegerat , wie z.B. ein Kopf horersystem zur Ubertra- 
gung von zusatzlicher Information zur Bedienperson zu 
veranlassen . 
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